Meta disponibiliza em open source a IA generativa para áudio "AudioCraft"

• IA generativa que cria áudio e música de alta qualidade a partir de entradas de usuário baseadas em texto
• Composta por MusicGen + AudioGen + decodificador EnCodec, responsáveis respectivamente por música, geração de áudio e compressão de áudio
• Pode ser usada para fins de pesquisa e para ajudar as pessoas a aumentar a compreensão sobre a tecnologia
• Um músico profissional pode compor uma nova faixa sem tocar uma única nota em um instrumento, e um desenvolvedor indie de games pode implementar efeitos sonoros realistas e ruídos de fundo a baixo custo

[ticonweb]

Não sei se isso seria possível com o código disponibilizado, mas se desse para colocar em faixas por instrumento dentro de um software de Digital Audio Workstation, a utilidade seria realmente enorme.

Obrigado pela notícia

[GN⁺]

Comentários no Hacker News

• Modelos de IA generativa para áudio, como o AudioCraft, usados em publicidade facilitam testes A/B e reduzem a necessidade de profissionais criativos.
• A Meta está se diferenciando da OpenAI ao enfatizar que usa dados licenciados e não usa dados pelos quais não pagou.
• A licença CC-BY-NC usada no AudioCraft não é considerada uma licença de código aberto segundo a definição de open source.
• Há preocupação de que a enxurrada de conteúdo gerado por IA faça o passado desaparecer e torne mais difícil distinguir informações reais de falsas.
• Há especulações sobre a capacidade de gerar música com base em bibliotecas musicais existentes.
• Algumas pessoas acreditam que permitir que detentores de direitos autorais controlem a entrada de dados em modelos de IA pode levar a uma sociedade de "crime de pensamento".
• Não está claro por que a Meta escolheu abrir o código desses modelos.
• Alguns usuários estão tendo dificuldade para encontrar documentação sobre instalação e uso dos modelos.
• A diferença de qualidade de áudio entre o MBD e as variantes EnCodec do AudioCraft é perceptível.
• Um comentarista sugere que o Spotify poderia usar modelos de IA generativa como o AudioCraft para criar sua própria música e reduzir a dependência de gravadoras em busca de maior lucratividade.