4月2日,昆侖萬維AI音樂生成大模型「天工SkyMusic」即日起面向社會開啟免費邀測。
本輪邀測將開放1000個免費名額,面向行業媒體、專家、以及感興趣的音樂從業者開放,用戶可掃描文后二維碼或通過網頁填寫申請,收到申請表后工作人員將第一時間聯絡回復。「天工SkyMusic」正式版也將在4月17日隨「天工3.0」面向全社會免費開放。
申請網頁:https://rg975ojk5z.feishu.cn/share/base/form/shrcnTcBRpGzv5Sx9xAGd5V97Md
「天工SkyMusic」基于昆侖萬維「天工3.0」超級大模型打造,是目前國內唯一公開可用的AI音樂生成大模型。
在通往 AGI 的道路上,多數團隊都專注于模型智力的擴展和增強,幾乎沒有人關注AI如何幫助人們理解和更好地表達情感。智力固然重要,但情感是我們能夠被稱之為人的關鍵,于是,情感 AGI 成為昆侖天工探索研究的一個重要方向。
我們發現相比文本和圖片,音頻內容是理解人類情感最好的方式,而音樂又是人類情感表達最充沛、最不受地域和文化限制的內容載體,不論時代變幻,不論是戰爭還是災禍,人們總是能通過音樂傳遞自己的感受并獲得情感的慰藉。于是我們創造了音樂音頻大模型「天工SkyMusic」,并在公司內部測試中已經獲得了非常好的反饋和表現,很高興跟大家宣布:即日起天工音樂開放媒體與行業專家內測,來體驗人聲情感表達 SOTA 的音樂大模型產品。生成作品效果如下:
采用自研類Sora模型架構 擁有五大優勢
「天工SkyMusic」采用音樂音頻領域類Sora模型架構,Large-scale Transformer 負責譜曲,來學習 Music Patches 的上下文依賴關系,同時完成音樂可控性;Diffusion Transformer 負責演唱,通過LDM讓Music Patches被還原成高質量音頻,使得「天工SkyMusic」能夠支持生成80秒44100Hz 采樣率雙聲道立體聲歌曲。這套模型架構在處理視頻、音頻和音樂領域效果極佳。昆侖萬維團隊也將在后續逐步迭代和添加新的能力,讓模型具備多模態的情感理解與表達能力。
「天工SkyMusic」具有以下五大特點:
1. 高質量AI音樂
「天工SkyMusic」能夠生成80秒44100Hz采樣率雙聲道立體聲AI歌曲,并可根據用戶輸入的歌詞風格生成對應歌曲風格。
2. 人聲“以假亂真”
人聲合成是AI音樂生成中最重要、最能體現生成效果和品質的維度。「天工SkyMusic」的AI人聲合成能夠達到業內頂尖的SOTA水平,中文水平極為優秀,發音清晰、無異響。其中文演唱效果更是顯著好于國外產品,領先世界水平。
3. 歌詞段落控制
「天工SkyMusic」能夠通過歌詞來控制歌曲,讓生成的歌曲可以明確分辨出不同歌詞段落的情緒變化,體現出主歌和副歌、前奏和主歌的段落差異。
4. 多種音樂風格
「天工SkyMusic」支持說唱、民謠、放克、古風、電子等多種音樂風格,用戶在創作音樂時,可以通過參考音頻制定想要的音樂風格。
5. 音樂智能表達- 歌唱技巧學習
「天工SkyMusic」同時能夠學習如顫音、歌劇、吟唱、男女對唱,自動和聲等多種歌唱技巧,讓用戶創作的歌曲得到更恰當的情感表達。
一直以來,AI音樂生成大模型都是AI大模型行業最受關注的落地應用之一。早在2022年12月,昆侖萬維就發布了「昆侖天工」AIGC全系列開源算法與模型,其中就包括多模態音樂內容生成大模型。此后,昆侖萬維更是通過AI音樂生成大模型為北京市東城區域文商旅融合品牌“故宮以東”打造了年度數字主題曲,將AI音樂前沿科技與東城區歷史文化深度融合。
今天面向社會開啟免費邀測的「天工SkyMusic」更是國內首款、同時也是目前國內唯一公開可用的AI音樂生成大模型。
2023 年,昆侖萬維在 “All in AGI 和 AIGC” 的戰略推動下,在人工智能領域取得了許多進展,逐步形成了AI大模型、AI搜索、AI音樂、AI 漫畫、AI社交、AI游戲等AI業務矩陣。
昆侖萬維創始人周亞輝表示:“未來三十年,人類社會將從感知線,變成表達線,整個人類社會在自我表達側要翻1000倍;創作和自我表達是未來30年在整個社交和文化領域增長最快的曲線,會有越來越多人表達自我,表達對世界的理解、對社會事物的態度,表達越來越藝術化和趣味化;這種表達在過去很困難,因為工具門檻高,而未來30年是自我表達的30年,我們要用AI把人類創作的門檻降得足夠低,讓人們更充分地實現自我表達。”
2024年,昆侖萬維發布全新公司使命:“實現通用人工智能,讓每個人更好地塑造和表達自我”。
這一使命體現了技術創新與人文關懷的結合,旨在創造一個每個人都能夠自由地發揮自己最大潛力的未來。通過通用人工智能,昆侖萬維希望構建一個更加智能、更加互聯、更加理解和尊重每個人個性的世界。
音樂,將會是其中的重要環節。
通過「天工SkyMusic」,昆侖萬維希望幫助每一個人更好地創作音樂,表達情感。
當前,昆侖萬維已打造了集AI搜索、AI寫作、AI長文本閱讀、AI對話、AI語音合成、AI圖片生成、AI漫畫創作、AI圖片識別、AI音樂生成、AI代碼寫作、AI表格生成等多項能力于一體的「天工3.0」多模態“超級模型”(Super Model),成為AI行業全新里程碑。
本輪「天工SkyMusic」邀測將開放1000個免費名額,面向行業媒體、專家、以及感興趣的音樂從業者開放。歡迎掃碼或通過通過網頁填寫以下報名表,昆侖萬維工作人員將在第一時間聯絡回復。未申請邀測的用戶也可在4月17日免費下載最新版“天工AI智能助手”APP,感受「天工3.0」與「SkyMusic」帶來的顛覆性AI體驗。
申請網頁:https://rg975ojk5z.feishu.cn/share/base/form/shrcnTcBRpGzv5Sx9xAGd5V97Md