【AiBase提要:】尽管这份电子表格目前似乎已无法访问，但在互联网档案馆和2023年11月提交的法庭文件中仍然可以查看。这些文件是一个集体诉讼的一部分，由10名视觉艺术家于去年1月提起，指控DeviantArt、Midjourney、Stability AI和Runway AI侵犯版权，未经授权使用他们的作品来训练人工智能。
除了可以从文字生成音乐外，它还支持图像、视频和音频生成音乐，并且还可以编辑已有的音乐。该项目利用了MERT等编码器进行音乐理解，ViT进行图像理解，ViViT进行视频理解，并使用MusicGen/AudioLDM2模型作为音乐生成模型（音乐解码器）。用户可以轻松移除或替换特定乐器，调整音乐的节奏和速度。这使得用户能够创造出符合其独特创意的音乐作品。
此外，M2UGen还加入了适配器和LLaMA2模型，使得该模型具备多种能力。
模型下载地址:https://huggingface.co/damo-vilab/dreamtalk