Google apresenta nova IA capaz de criar sons para vídeos e descrições em texto

Novo recurso interpreta comando de usuários e cria sons para imagens de acordo com contexto apresentado

Nesta terça-feira (18/06), a DeepMind, empresa adquirida pela Google e que tem como foco o desenvolvimento de projetos focados em inteligência artificial, revelou a criação de uma nova IA, que ajuda a criar sons para vídeos.

Através de descrições textuais e comandos de seu usuário, o novo recurso criará sons baseando-se nas imagens de contexto. Ainda sem um nome de batismo, essa ferramenta é chamada de “vídeo para áudio” ou “V2A”.

Usando a capacidade de interpretação textual e visual apresentados pela DeepMind, a inteligência gera sons que podem sair no formato de música ou até mesmo áudios de uma conversa. 

Junto ao anúncio, a empresa parceira da Google também revelou como funciona o processo de criação de sons. O trabalho se trata de uma junção de codificadores de vídeo e texto, unidos a um modelo de difusão. Esse modelo fica responsável por gerar um áudio ainda em compressão e que será decoficidado. 

Após ser decodificado, é formado o áudio final. Essa nova ferramenta abre a possibilidade para a criação de trilhas sonoras para gravações de filmes ou séries, sons ambientes com diálogos.

Criação tem DeepMind, subsidiária da Google, como criadora. Imagem: Pexels.

A DeepMind ressaltou que o resultado final ainda não está aperfeiçoado e que é preciso trabalhar na sincronização entre os áudios e os lábios durante uma cena de diálogo, por exemplo.

Ainda assim, a quantidade de efeitos sonoros que poderão ser criados pelo recurso são infinitas, de acordo com o próprio comunicado da empresa. Por se tratar de um projeto recente, a ferramenta ainda não está aberta ao público geral.

Entretanto, o esperado é que o programa passe por uma avaliação severa de segurança e experimentação antes de ser liberado ao público. A empresa também ressaltou a importância deste estudo no avanço da IA e na preparação de de ferramentas mais robustas.

Você também pode gostar de ler 👇🏻

João Vicente de Castro revela briga com Dado Dolabella no passado

Em 08/10/2024 às 15h15 - Atualizado em 08/10/2024 às 15h58

Rick, da dupla com Renner, sofre acidente em estrada de Florianópolis

Em 03/10/2024 às 18h48 - Atualizado em 03/10/2024 às 22h02

Saiba quais doenças Cid Moreira enfrentou nos últimos anos

Em 03/10/2024 às 12h38 - Atualizado em 03/10/2024 às 12h40

Cid Moreira deixa fortuna, mas herança gera polêmica entre familiares

Em 03/10/2024 às 12h10 - Atualizado em 03/10/2024 às 12h19

"Marcante"; William Bonner se emociona ao falar sobre Cid Moreira

Em 03/10/2024 às 11h25 - Atualizado em 03/10/2024 às 13h45

Esposa de Cid Moreira fala pela primeira vez após morte do jornalista

Em 03/10/2024 às 11h16 - Atualizado em 03/10/2024 às 11h24

Relembre a trajetória do locutor e jornalista Cid Moreira

Em 03/10/2024 às 11h02 - Atualizado em 03/10/2024 às 11h12

Eliana revela dormir em quarto separado de marido devido a incômodo com ronco

Em 03/10/2024 às 10h56 - Atualizado em 03/10/2024 às 10h57

Tiago Abravanel comenta sobre morte de Silvio Santos e expõe atitude após enterro

Em 03/10/2024 às 10h15 - Atualizado em 03/10/2024 às 10h16

Morre o ex-âncora do Jornal Nacional Cid Moreira aos 97 anos

Em 03/10/2024 às 10h07 - Atualizado em 03/10/2024 às 11h03

Andressa Urach expulsa Juju Ferrari de seu aniversário: “Essa barraqueira”

Em 03/10/2024 às 09h20 - Atualizado em 03/10/2024 às 09h41