Google apresenta nova IA capaz de criar sons para vídeos e descrições em texto

Novo recurso interpreta comando de usuários e cria sons para imagens de acordo com contexto apresentado

Nesta terça-feira (18/06), a DeepMind, empresa adquirida pela Google e que tem como foco o desenvolvimento de projetos focados em inteligência artificial, revelou a criação de uma nova IA, que ajuda a criar sons para vídeos.

Através de descrições textuais e comandos de seu usuário, o novo recurso criará sons baseando-se nas imagens de contexto. Ainda sem um nome de batismo, essa ferramenta é chamada de “vídeo para áudio” ou “V2A”.

Usando a capacidade de interpretação textual e visual apresentados pela DeepMind, a inteligência gera sons que podem sair no formato de música ou até mesmo áudios de uma conversa. 

Junto ao anúncio, a empresa parceira da Google também revelou como funciona o processo de criação de sons. O trabalho se trata de uma junção de codificadores de vídeo e texto, unidos a um modelo de difusão. Esse modelo fica responsável por gerar um áudio ainda em compressão e que será decoficidado. 

Após ser decodificado, é formado o áudio final. Essa nova ferramenta abre a possibilidade para a criação de trilhas sonoras para gravações de filmes ou séries, sons ambientes com diálogos.

Criação tem DeepMind, subsidiária da Google, como criadora. Imagem: Pexels.

A DeepMind ressaltou que o resultado final ainda não está aperfeiçoado e que é preciso trabalhar na sincronização entre os áudios e os lábios durante uma cena de diálogo, por exemplo.

Ainda assim, a quantidade de efeitos sonoros que poderão ser criados pelo recurso são infinitas, de acordo com o próprio comunicado da empresa. Por se tratar de um projeto recente, a ferramenta ainda não está aberta ao público geral.

Entretanto, o esperado é que o programa passe por uma avaliação severa de segurança e experimentação antes de ser liberado ao público. A empresa também ressaltou a importância deste estudo no avanço da IA e na preparação de de ferramentas mais robustas.

Você também pode gostar de ler 👇🏻

TikToker realiza funeral simbólico para o braço após amputação

Em 20/01/2025 às 22h32 - Atualizado em 20/01/2025 às 22h37

Sobreviventes a queda de helicóptero tem estado de saúde atualizado

Em 18/01/2025 às 21h06 - Atualizado em 18/01/2025 às 21h46

Incêndio em Los Angeles destrói mansão de John Lennon, comprada por brasileiro

Em 09/01/2025 às 16h41 - Atualizado em 10/01/2025 às 07h47

Avião vindo de Paris faz pouso em Fortaleza após incidente inusitado

Em 05/01/2025 às 16h59 - Atualizado em 05/01/2025 às 17h16

Turista atingida por fogos de artifício desabafa após sofrer graves queimaduras

Em 02/01/2025 às 14h08 - Atualizado em 02/01/2025 às 15h20

Mulher se confunde e viraliza ao comemorar ‘vitória’ na Mega-Sena

Em 02/01/2025 às 10h38 - Atualizado em 02/01/2025 às 10h57

Traição no RJ: marido de amante do pastor anuncia término do casamento

Em 01/01/2025 às 18h52 - Atualizado em 01/01/2025 às 19h04

Falece André Barros, jogador do Marreco Futsal, aos 31 anos

Em 31/12/2024 às 15h41 - Atualizado em 31/12/2024 às 15h48

Traição exposta no culto; Veja detalhes do caso entre o pastor e a levita Laís

Em 31/12/2024 às 08h56 - Atualizado em 31/12/2024 às 09h04

Avião de pequeno porte cai no Rio Grande do Sul. Veja detalhes!

Em 22/12/2024 às 13h13 - Atualizado em 22/12/2024 às 14h57