快手技術副總裁王仲遠:快手以AI技術推動音樂大眾化發(fā)展
6月6日,2021全球人工智能技術大會“發(fā)展與挑戰(zhàn)”專題論壇在杭州舉行??焓旨夹g副總裁、MMUY-tech負責人王仲遠出席論壇并發(fā)表《音樂與技術的碰撞交融——藝術如何隨時代變遷》主題演講,分享快手在AI音樂方面的動態(tài)與進展,充分展現(xiàn)快手領先的人工智能技術,以及AI音樂為短視頻帶來的強大助力。AI技術+音樂深度融合,快手持續(xù)提升短視頻觀看體驗作為國民短視頻APP,快手擁有海量內容、超大流量和高用戶粘
2021-06-09 16:39:38
來源:釘科技??

6月6日,2021全球人工智能技術大會“發(fā)展與挑戰(zhàn)”專題論壇在杭州舉行??焓旨夹g副總裁、MMU&Y-tech負責人王仲遠出席論壇并發(fā)表《音樂與技術的碰撞交融——藝術如何隨時代變遷》主題演講,分享快手在AI音樂方面的動態(tài)與進展,充分展現(xiàn)快手領先的人工智能技術,以及AI音樂為短視頻帶來的強大助力。

image.png

AI技術+音樂深度融合,快手持續(xù)提升短視頻觀看體驗

作為國民短視頻APP,快手擁有海量內容、超大流量和高用戶粘性。數(shù)據(jù)顯示,平均每月快手用戶上傳的短視頻數(shù)量超11億,整體日活達3.7億+,用戶平均每日在快手平臺觀看短視頻和直播內容的時長近100分鐘。

在豐富的快手社區(qū)生態(tài)中,音樂成為激勵用戶創(chuàng)作的因素之一。在快手,76%的快手作品有配樂,90%的快手用戶期望大部分短視頻有配樂。

為何用戶在創(chuàng)作短視頻時,對于音樂有如此強的依賴性?王仲遠表示:“對于短視頻的制作體驗而言,音樂的正向影響至關重要。比如唯美風短視頻如果去掉背景音樂只剩原始聲音,就會削弱其氛圍感,給用戶留下與之前截然不同的印象?!?/span>

image.png

對此,王仲遠進一步分析了音樂的獨特魅力。在他看來,音樂可以與人的思想情緒聯(lián)系在一起,能夠讓人感到歡喜,感到悲傷,感到期待等。當中國人聽到春節(jié)序曲時,往往會產生一種春回大地、萬物復蘇的感受,央視春晚主持人的開場詞也不自覺在腦海中浮現(xiàn)。

作為一種具有魔力的藝術表現(xiàn)形式,音樂也隨著技術的發(fā)展而產生新的形式。在工業(yè)化時代,制造工藝的改進使得樂器可以發(fā)出的聲音更加豐富、層次化。在電子化時代,電子技術的發(fā)展創(chuàng)造出自然界機械無法發(fā)出的聲音,音樂的表現(xiàn)力更加多元化。

如今,步入人工智能時代,AI技術則幫助音樂實現(xiàn)全面的個性化和智能化,為音樂和短視頻帶來了新的發(fā)展空間。據(jù)王仲遠介紹,前段時間火爆全網的《螞蟻呀嘿》正是將音樂和視覺AI技術進行了創(chuàng)意融合,用戶只需要一張照片就可以自動生成詼諧好玩的動態(tài)唱歌視頻,再加上魔性的BGM,很快成為短視頻用戶爭相創(chuàng)作的模板。

AI技術推動音樂大眾化,快手自建模型還原專業(yè)級演唱

在技術的加持下,音樂制作進入大眾化時代。如何幫助更多用戶創(chuàng)作出個性化的音樂?快手自主研究了AI音樂創(chuàng)作模型和AI歌手。

從音樂制作流程上來看,大多偏向于流水線化、工程化和模塊化,首先是把握創(chuàng)作動機,然后進行作詞、作曲,之后進行編曲,最后錄音和混音。而通過快手搭建的AI模型,其中的每一步都可以借助AI完成。

王仲遠表示:“在AI時代,動機變得十分簡單。把隨機關鍵詞輸入快手AI音樂模型中,模型就能把詞轉換成動機的一種表示,乃至于各種初始化的音樂?!?/span>

image.png

確定好動機之后就可以利用快手AI模塊生成歌詞。在AI歌詞方面,快手針對數(shù)百萬已有歌曲對模型進行重新訓練,以確保AI可以很好地理解詞義,讓用戶只需輸入一個主題、一個情感、一個風格,就能在數(shù)秒內生成數(shù)十首歌詞。

在AI旋律的創(chuàng)作上,快手也采用類似方法,搭建了數(shù)十萬首曲譜和百萬首歌曲音頻訓練模型再通過迷你數(shù)據(jù)庫讓模型自監(jiān)督學習歌曲的內在關聯(lián),從而訓練AI旋律生成的能力。

image.png

據(jù)了解,快手邀請了平臺內的音樂人使用AI模型來創(chuàng)作新歌曲,已創(chuàng)作的流行音樂有《甜甜的味道》《夜》《勇往直前》等。

錄制一首高質量的成品歌曲,對歌手的演唱水平要求極高。為了解決部分用戶面臨的唱歌跑調、音色不好聽等問題,快手則推出了AI歌手輔助創(chuàng)作功能,并不斷提升其模型的精準度。

據(jù)介紹,2020年5月,AI歌手的演唱還是KTV水平;到2020年12月,普通人已經很難發(fā)現(xiàn)AI歌手演唱中的瑕疵;如今,模型會根據(jù)曲譜自動調整音高、節(jié)拍和歌詞,AI歌手可以逼真地還原出專業(yè)級歌手的演唱水平。

演講最后,王仲遠表示:“未來,快手還將探索更多新技術,豐富生成側的玩法。借助語音識別技術,快手希望AI歌手將來可以模仿個人音色,AI音樂則能夠把說的話直接轉成歌曲,滿足用戶更個性化的音樂創(chuàng)作需求,持續(xù)助力短視頻領域創(chuàng)作?!?/span>

最新文章
1
更懂用戶、更強服務!酷開或將成為智能體第一企業(yè)
2
與企業(yè)、社會、環(huán)境多方共贏,京東方破浪可持續(xù)發(fā)展深海
3
蘋果發(fā)布iOS 18.5開發(fā)者預覽版Beta 3:正式版5月登場
4
鴻蒙微信1.0.6.16邀測開啟:支持拉黑、小程序添加到桌面
5
2025Q1煙灶市場:提升能力、保持定力,行穩(wěn)致遠
6
iPhone 17 Pro/Max 引入“天空藍”配色
7
工信部:一季度規(guī)上工業(yè)增加值同比增長6.5%
8
汽車智能化進程全維度加速
9
一季度中國電視品牌整機出貨量同比增長4.7%,Mini LED成大贏家
10
REDMI Turbo 4 Pro外觀曝光,4月24日正式發(fā)布!
11
定價最激進的天璣9400+!真我GT7明天發(fā)布:六大升級匯總
12
互聯(lián)網、手機、電視、VR頂流們,誰會在AI眼鏡大戰(zhàn)里先勝出?
13
vivo X200 Ultra和vivo X200s正式發(fā)布,顛覆性革新重塑用戶體驗
14
海信冰箱·雨辰助學走進三清山學校:科技溫度溫暖留守童年
15
懂氛圍、會治愈,長虹熊貓AI TV給AI電視創(chuàng)新打了個樣
16
探訪國產算力一線:DeepSeek引發(fā)高效“革命”
17
2025Q1熱水器市場:聚焦換新需求,以細分賽道破局低增長困境
18
臺積電回應“三大關切”
19
增長回歸理性,2025年“國補”之下小家電市場仍然面臨挑戰(zhàn)
20
中國消費品質量安全提升系列行動2025在京啟動 家電行業(yè)邁向高質量發(fā)展新征程
關于我們

微信掃一掃,加關注

商務合作
  • QQ:61149512