天谱乐 – 唱鸭团队推出的首个多模态音乐生成大模型
发布于 2024-12-31 · 天谱乐是趣丸科技唱鸭团队推出的全球首个多模态音乐生成大模型,支持文本、图片和视频等多种输入方式生成音乐。用户可以通过上传文本、图片或视频,生成最长3.5分钟的歌曲或音乐视频。能理解音乐的和弦、旋律、歌词、演唱风格等复杂特征,生成高契合度的视频配乐。
天谱乐是什么
天谱乐出自趣丸科技唱鸭团队,是全球首个多模态音乐生成大模型,文本、图片、视频都能当输入来出音乐。传一段文字、一张图或一段视频进去,可以生成最长3.5分钟的歌曲或音乐视频。它读得懂和弦、旋律、歌词、演唱风格这些复杂特征,配出来的视频BGM贴合度很高。专业人士还有专家模式可用,创作自由度更高,生成的人声接近真人发音。
天谱乐能做什么
- 文生音乐:输入一段文字,等上15-20秒,就能拿到一段最长3.5分钟的纯音乐。
- 音频生音乐:点几个音符或者简单哼两句,一首歌就出来了。
- 图片/视频生音乐:上传一张图片或者不超过60秒的视频,天谱乐能配出很搭的BGM,还能顺带呈现30秒MV效果。
- 个性化音乐创作体验:文本、图片、视频随便挑一种上传,都能生成最长3.5分钟的歌曲或音乐。
- 高契合度视频配乐:背后有自研的画面情绪理解模型等领先技术,天谱乐大模型会逐帧识别、理解画面明暗、色彩和情绪的细微变化,再据此配乐,契合度自然高。
- 音乐复杂特征理解:和弦、旋律、歌词、演唱风格这些复杂特征,天谱乐都能理解。
- 人声技术:它生成的人声跟真人发音几乎分不出差别,发音清晰度、语句停顿都和真人无异。
- 专业级音乐生成效果:上传一张图片或不超过60秒的视频,就能得到一首带人声唱词、和画面内容与基调高度适配的完整歌曲,成品能达到专业级水准。
- 全面接入唱鸭APP:天谱乐大模型已经全量接入趣丸科技旗下的唱鸭APP,所有用户都能用。
- 专家模式:面向专业人士的模式,风格、和弦、BPM等专业选项都在,创作自由度更高。
- 音乐编辑功能:生成完还能继续编辑调整,改到符合创作需求为止。
怎么用天谱乐
- 访问官网:打开天谱乐的官方网站 ,注册或者登录账号。
- 选择创作功能:按自己的需要,挑“文本生成音乐”“图片生成音乐”或者“视频生成音乐”这些功能。
- 文本生成音乐:在文本输入框里写下你想要的内容,点击“生成”按钮,系统会自动生成最长3.5分钟的歌曲或音乐。
- 图片生成音乐:上传要配图的图片,点击“生成”按钮,系统会自动生成音乐视频。
- 视频生成音乐:上传10-60秒的视频片段,点击“生成”按钮,系统会自动生成音乐视频。
- 试听与调整:生成完先试听一遍,需要的话继续调整修改。
天谱乐的测试案例
🎵文本生曲
- 提示词:写一首送给辛勤工作的劳动者的赞歌,使用流行风格
- 试听地址:劳动者的信仰
🎵图片生曲
- 试听地址:
🎵视频生曲
天谱乐适合用在哪
- 音乐创作辅助:专业音乐人借它提效,“文本生曲”“图片生曲”“视频生曲”几个功能走一遍,作品很快出来,创意也跟着被点燃。
- 短视频背景音乐制作:短视频创作者可以用天谱乐配出跟画面内容相符的背景音乐,内容质量和观看体验都能往上走。
- 影视和游戏配乐:影视、广告、游戏这些领域,它能按需定制音乐,制作成本和时间都能省下来。
- 个人娱乐与表达:不懂乐器、不懂乐理的普通用户,也能靠天谱乐做到0门槛创作音乐,把情绪和态度唱出来。
- 社交媒体内容增强:给Vlog、家庭录像加一段背景音乐,或者写一首专属歌曲表达态度和情感。
- 商业广告宣传:它的定制化音乐方案可以给商业广告配个性化背景音乐,广告的吸引力更强。






0 条评论
暂无评论,来抢沙发。