音乐ChatGPT时刻来临!「天工SkyMusic」音乐大模型今日启动邀测

4月2日,昆仑万维AI音乐生成大模型「天工SkyMusic」即日起面向社会开启免费邀测。

本轮邀测将开放1000个免费名额,面向行业媒体、专家、以及感兴趣的音乐从业者开放,用户可扫描文后二维码或通过网页填写申请,收到申请表后工作人员将第一时间联络回复。「天工SkyMusic」正式版也将在4月17日随「天工3.0」面向全社会免费开放。

「天工SkyMusic」基于昆仑万维「天工3.0」超级大模型打造,是目前国内唯一公开可用的AI音乐生成大模型。

在通往 AGI 的道路上,多数团队都专注于模型智力的扩展和增强,几乎没有人关注AI如何帮助人们理解和更好地表达情感。智力固然重要,但情感是我们能够被称之为人的关键,于是,情感 AGI 成为昆仑天工探索研究的一个重要方向。

我们发现相比文本和图片,音频内容是理解人类情感最好的方式,而音乐又是人类情感表达最充沛、最不受地域和文化限制的内容载体,不论时代变幻,不论是战争还是灾祸,人们总是能通过音乐传递自己的感受并获得情感的慰藉。于是我们创造了音乐音频大模型「天工SkyMusic」,并在公司内部测试中已经获得了非常好的反馈和表现,很高兴跟大家宣布:即日起天工音乐开放媒体与行业专家内测,来体验人声情感表达 SOTA 的音乐大模型产品。生成作品效果如下:

采用自研类Sora模型架构 拥有五大优势

「天工SkyMusic」采用音乐音频领域类Sora模型架构,Large-scale Transformer 负责谱曲,来学习 Music Patches 的上下文依赖关系,同时完成音乐可控性;Diffusion Transformer 负责演唱,通过LDM让Music Patches被还原成高质量音频,使得「天工SkyMusic」能够支持生成80秒44100Hz 采样率双声道立体声歌曲。这套模型架构在处理视频、音频和音乐领域效果极佳。昆仑万维团队也将在后续逐步迭代和添加新的能力,让模型具备多模态的情感理解与表达能力。

「天工SkyMusic」具有以下五大特点:

1. 高质量AI音乐

「天工SkyMusic」能够生成80秒44100Hz采样率双声道立体声AI歌曲,并可根据用户输入的歌词风格生成对应歌曲风格。

2. 人声“以假乱真”

人声合成是AI音乐生成中最重要、最能体现生成效果和品质的维度。「天工SkyMusic」的AI人声合成能够达到业内顶尖的SOTA水平,中文水平极为优秀,发音清晰、无异响。其中文演唱效果更是显著好于国外产品,领先世界水平。

3. 歌词段落控制

「天工SkyMusic」能够通过歌词来控制歌曲,让生成的歌曲可以明确分辨出不同歌词段落的情绪变化,体现出主歌和副歌、前奏和主歌的段落差异。

4. 多种音乐风格

「天工SkyMusic」支持说唱、民谣、放克、古风、电子等多种音乐风格,用户在创作音乐时,可以通过参考音频制定想要的音乐风格。

5.音乐智能表达- 歌唱技巧学习

「天工SkyMusic」同时能够学习如颤音、歌剧、吟唱、男女对唱,自动和声等多种歌唱技巧,让用户创作的歌曲得到更恰当的情感表达。

一直以来,AI音乐生成大模型都是AI大模型行业最受关注的落地应用之一。早在2022年12月,昆仑万维就发布了「昆仑天工」AIGC全系列开源算法与模型,其中就包括多模态音乐内容生成大模型。此后,昆仑万维更是通过AI音乐生成大模型为北京市东城区域文商旅融合品牌“故宫以东”打造了年度数字主题曲,将AI音乐前沿科技与东城区历史文化 融合。

今天面向社会开启免费邀测的「天工SkyMusic」更是国内首款、同时也是目前国内唯一公开可用的AI音乐生成大模型。

2023 年,昆仑万维在 “All in AGI 和 AIGC” 的战略推动下,在人工智能领域取得了许多进展,逐步形成了AI大模型、AI搜索、AI音乐、AI 漫画、AI社交、AI游戏等AI业务矩阵。

昆仑万维创始人周亚辉表示:“未来三十年,人类社会将从感知线,变成表达线,整个人类社会在自我表达侧要翻1000倍;创作和自我表达是未来30年在整个社交和文化领域增长最快的曲线,会有越来越多人表达自我,表达对世界的理解、对社会事物的态度,表达越来越艺术化和趣味化;这种表达在过去很困难,因为工具门槛高,而未来30年是自我表达的30年,我们要用AI把人类创作的门槛降得足够低,让人们更充分地实现自我表达。”

2024年,昆仑万维发布全新公司使命:“实现通用人工智能,让每个人更好地塑造和表达自我”。

这一使命体现了技术创新与人文关怀的结合,旨在创造一个每个人都能够自由地发挥自己最大潜力的未来。通过通用人工智能,昆仑万维希望构建一个更加智能、更加互联、更加理解和尊重每个人个性的世界。

音乐,将会是其中的重要环节。

通过「天工SkyMusic」,昆仑万维希望帮助每一个人更好地创作音乐,表达情感。

当前,昆仑万维已打造了集AI搜索、AI写作、AI长文本阅读、AI对话、AI语音合成、AI图片生成、AI漫画创作、AI图片识别、AI音乐生成、AI代码写作、AI表格生成等多项能力于一体的「天工3.0」多模态“超级模型”(Super Model),成为AI行业全新里程碑。

本轮「天工SkyMusic」邀测将开放1000个免费名额,面向行业媒体、专家、以及感兴趣的音乐从业者开放。欢迎扫码或通过通过网页填写以下报名表,昆仑万维工作人员将在第一时间联络回复。未申请邀测的用户也可在4月17日免费下载最新版“天工AI智能助手”APP,感受「天工3.0」与「SkyMusic」带来的颠覆性AI体验。

(免责声明:本网站内容主要来自原创、合作伙伴供稿和第三方自媒体作者投稿,凡在本网站出现的信息,均仅供参考。本网站将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。本网站对有关资料所引致的错误、不确或遗漏,概不负任何法律责任。
任何单位或个人认为本网站中的网页或链接内容可能涉嫌侵犯其知识产权或存在不实内容时,应及时向本网站提出书面权利通知或不实情况说明,并提供身份证明、权属证明及详细侵权或不实情况证明。本网站在收到上述法律文件后,将会依法尽快联系相关文章源头核实,沟通删除相关内容或断开相关链接。 )

Baidu
map