天谱乐ai

天谱乐ai官网,全球首个多模态配乐大模型,文本、图片和视频等多种输入方式生成音乐

简介

让「视听同步生成」变成现实。只需上传一段视频，音乐大模型就能立刻整出 30 秒的 MV 天谱乐是由趣丸科技旗下的唱鸭团队自主研发的AI音乐创作平台。一键配乐「天谱乐」拿下「全球首创」

天谱乐ai官网: https://www.tianpuyue.cn/

主要功能和特色

今年 7 月，音频垂直赛道独角兽趣丸科技推出了全球首个多模态配乐大模型「天谱乐」。

趣丸科技一直深耕音乐、音频领域，旗下的拳头产品有 TT 语音，如今累计注册用户已超 2 亿，是国内最大的兴趣社交平台之一。

以下是天谱乐的主要功能和特色：

1. **多模态音乐生成**：天谱乐支持文本、图片和视频等多种输入方式生成音乐，这在全球范围内是首创的。

2. **个性化音乐创作体验**：用户可以通过上传文本、图片或视频，生成最长3.5分钟的歌曲或音乐。

3. **高契合度视频配乐**：基于自研的画面情绪理解模型等领先技术，天谱乐大模型可以逐帧识别和理解视频画面的明暗、色彩、情绪的细微变化，并生成高契合度的视频配乐。

4. **音乐复杂特征理解**：天谱乐能够理解音乐的和弦、旋律、歌词、演唱风格等复杂特征。

5. **人声技术**：天谱乐生成的人声效果非常接近真实人类的发音，无论是发音的清晰度还是语句的停顿，都几乎与真人无异。

6. **专业级音乐生成效果**：用户上传图片或不超过60秒的视频，即可生成与图像内容和基调高度适配的带人声唱词的完整歌曲，生成效果达到专业级水准。

7. **全面接入唱鸭APP**：天谱乐大模型已全面接入趣丸科技旗下唱鸭APP，面向所有用户开放。

8. **专家模式**：对于专业人士，天谱乐提供了专家模式，包括风格、和弦、BPM等更专业的选项，提供更高的创作自由度。

9. **音乐编辑功能**：天谱乐还提供音乐编辑功能，对生成的音乐进行编辑和调整，以满足创作需求。

10. **一键分享**：输出带有字幕和封面标签的成品视频，方便一键分享到社媒或好友。

天谱乐的推出，标志着趣丸集团在AI音乐生成技术上取得了重大突破，为音乐创作领域带来了新的可能性。

我们知道，Suno V3 和 Udio 生成的歌曲都有带着明显的金属质感，听起来像压缩过的 MP3 ，尤其是人声部分特别明显，中文人声唱词更是差强人意。

在最具挑战的人声问题上，「天谱乐」中文人声唱词在多次技术迭代之后，已经达到了专业级人声效果，显著减少了电音感，拥有更加真实的歌手声音，接近音乐发行的级别。

「天谱乐」此次的技术突破，来自于天谱乐大模型在长序列音乐语意建模和高质量音频空间建模上实现进一步突破，高度还原音乐音频在高维空间的信号表征，实现音乐性和音质的飞跃。

不过，要生成理想的 MV 效果，歌曲必须高度贴合内容，这意味着音乐模型还要能理解画面蕴含的情绪、主题和细节。

基于大模型，「天谱乐」能准确识别出画面情绪和基调，完成卡点，生成精准匹配的背景音乐，这种先进的多模态理解与生成能力使「天谱乐」达到了国际领先水平。

目前，「天谱乐」大模型已全面接入趣丸旗下唱鸭 App，在国内率先实现产品化应用，目前已有 4600 万人注册使用唱鸭 App 或天谱乐官网，累计创作近 1000 万首 AI 歌曲。

「零门槛」音乐生成

国产应用三分天下

2023 年 12 月底上线的 Suno 迅速成为 2024 年 AI 音乐领域的焦点。在国内，类似 Suno 的音乐创作模型接连面世，趣丸科技「天谱乐」也与字节跳动、昆仑万维两家音乐大模型形成「三分天下有其一」的格局。

在这场「零门槛」AI 音乐生成角逐中，昆仑万维最先发力。旗下的音乐生成模型「天工 SkyMusic 」基于昆仑万维的「天工 3.0 」超级大模型打造，能够快速生成多种风格的音乐作品。

相比之下，拥有海量版权的在线音乐巨头则审慎得多。针对创作者，网易云音乐和腾讯音乐分别推出了具备 AI 辅助创作功能的「天音」和「启明星」平台。

「天音」更适合专业创作者，在「一键生成」上并没展现出领先其他 AI 生成应用的优势。「启明星」接入了「琴乐大模型」，仍聚焦于纯音乐创作，并未涉足涉及人声的歌曲生成。

对此，腾讯音乐表示，歌曲生成等复杂能力可以拭目以待。作为这一轮 AI 技术下的用户平台，他们选择踊跃但理性投入