色婷婷AⅤ一区二区三区|亚洲精品第一国产综合亚AV|久久精品官方网视频|日本28视频香蕉

          新聞中心

          EEPW首頁 > 消費(fèi)電子 > 業(yè)界動態(tài) > 網(wǎng)易云音樂的個性化推薦漫談

          網(wǎng)易云音樂的個性化推薦漫談

          作者: 時間:2016-05-10 來源:36大數(shù)據(jù) 收藏

            用過蝦米、酷狗、QQ音樂、,個人感受在音樂推薦這塊做的真心不錯,特別是以“人”為角度的推薦,沒有像蝦米、酷狗推的那么亂。蝦米還可以,但更多的是以歌搜歌的形式。剛注冊了一個新的賬號,避免有歷史數(shù)據(jù)的干擾,聽了一首周杰倫的《一路向北》和陳奕迅的《淘汰》,然后去個性化推薦里看到了蔡健雅的《紅色高跟鞋》和曲婉婷的《承認(rèn)》,給我的感覺還是比較驚喜,像蔡健雅一般聽的人比較少,還能推薦到體驗(yàn)不錯。當(dāng)然也有很多不一定特別準(zhǔn),當(dāng)然聽歌這東西就不需要完全準(zhǔn)確。

          本文引用地址:http://cafeforensic.com/article/201605/290944.htm

            關(guān)于個性化推薦這塊在公司外部介紹的比較少,但應(yīng)該推薦的算法和機(jī)制和大部分的音樂素材的公司做的類似。以item為核心的協(xié)同過濾(CF),通過打分機(jī)制來推薦最適合的歌曲。

              

          歌曲推薦

           

              

          每日歌曲

           

            、

            印象中早期網(wǎng)易云音樂還可以將自己聽的歌曲分享到微信朋友圈等,通過跳轉(zhuǎn)關(guān)聯(lián)到的賬戶ID識別出朋友關(guān)系。這個想法的確很贊,包括我第一次聽《一路向北》的時候也是一個朋友推薦給我的,這首歌不僅是個人喜歡的風(fēng)格,再加上有朋友推薦所以留下很好的印象。但是很可惜,現(xiàn)在朋友圈不能分享了。微博還可以分享,只是現(xiàn)在微博的數(shù)據(jù)很多水分。

              

          分享

           

            現(xiàn)在主流的方式都是人工+智能推薦,人工的方式就不過多介紹,費(fèi)時費(fèi)力。出不了幾張有限的專輯。現(xiàn)在主流都是通過機(jī)器學(xué)習(xí)的方式,通過同類人類的偏好給相似的人群推薦他們都喜歡的歌曲。也有根據(jù)以歌的item推薦相似的歌曲,但體驗(yàn)就是聽來聽去就是那個風(fēng)格,很快就乏味了。

            算法部分:

            1.相似人群的推薦

            引用:著作權(quán)歸作者所有。

            作者:邰原朗

            鏈接:網(wǎng)易云音樂的歌單推薦算法是怎樣的? – 邰原朗的回答

            來源:知乎

            有3首歌放在那里,《最炫民族風(fēng)》,《晴天》,《Hero》。

            A君,收藏了《最炫民族風(fēng)》,而遇到《晴天》,《Hero》則總是跳過;

            B君,經(jīng)常單曲循環(huán)《最炫民族風(fēng)》,《晴天》會播放完,《Hero》則拉黑了

            C君,拉黑了《最炫民族風(fēng)》,而《晴天》《Hero》都收藏了。

            我們都看出來了,A,B二位品味接近,C和他們很不一樣。

            那么問題來了,說A,B相似,到底有多相似,如何量化?

            我們把三首歌想象成三維空間的三個維度,《最炫民族風(fēng)》是x軸,《晴天》是y軸,《Hero》是z軸,對每首歌的喜歡程度即該維度上的坐標(biāo),

            并且對喜歡程度做量化(比如: 單曲循環(huán)=5, 分享=4, 收藏=3, 主動播放=2 , 聽完=1, 跳過=-1 , 拉黑=-5 )。

            那么每個人的總體口味就是一個向量,A君是 (3,-1,-1),B君是(5,1,-5),C君是(-5,3,3)。 (抱歉我不會畫立體圖)

            我們可以用向量夾角的余弦值來表示兩個向量的相似程度, 0度角(表示兩人完全一致)的余弦是1, 180%角(表示兩人截然相反)的余弦是-1。

            根據(jù)余弦公式, 夾角余弦 = 向量點(diǎn)積/ (向量長度的叉積) = ( x1x2 + y1y2 + z1z2) / ( 跟號(x1平方+y1平方+z1平方 ) x 跟號(x2平方+y2平方+z2平方 ) )

            可見 A君B君夾角的余弦是0.81 , A君C君夾角的余弦是 -0.97 ,公式誠不欺我也。

            以上是三維(三首歌)的情況,如法炮制N維N首歌的情況都是一樣的。

            假設(shè)我們選取一百首種子歌曲,算出了各君之間的相似值,那么當(dāng)我們發(fā)現(xiàn)A君還喜歡聽的《小蘋果》B君居然沒聽過,相信大家都知道該怎么和B君推薦了吧。

            第一類以人為本推薦算法的好處我想已經(jīng)很清楚了,那就是精準(zhǔn)!

            代價是運(yùn)算量很大,而且對于新來的人(聽得少,動作少),也不太好使,

            所以人們又發(fā)明了第二類算法。

            假設(shè)我們對新來的D君,只知道她喜歡最炫民族風(fēng),那么問題來了,給她推薦啥好咯?

              

          最炫民族風(fēng)

           

            如圖,推薦《晴天》!

            以及nick lee分享的一種矩陣計(jì)算得分的方式:

            作者:nick lee

            鏈接:網(wǎng)易云音樂的歌單推薦算法是怎樣的? – nick lee 的回答

            來源:知乎

            這里我想給大家介紹另外一種推薦系統(tǒng),這種算法叫做潛在因子(Latent Factor)算法。這種算法是在NetFlix(沒錯,就是用大數(shù)據(jù)捧火《紙牌屋》的那家公司)的推薦算法競賽中獲獎的算法,最早被應(yīng)用于電影推薦中。這種算法在實(shí)際應(yīng)用中比現(xiàn)在排名第一的 @邰原朗 所介紹的算法誤差(RMSE)會小不少,效率更高。我下面僅利用基礎(chǔ)的矩陣知識來介紹下這種算法。

            這種算法的思想是這樣:每個用戶(user)都有自己的偏好,比如A喜歡帶有小清新的、吉他伴奏的、王菲等元素(latent factor),如果一首歌(item)帶有這些元素,那么就將這首歌推薦給該用戶,也就是用元素去連接用戶和音樂。每個人對不同的元素偏好不同,而每首歌包含的元素也不一樣。我們希望能找到這樣兩個矩陣:

            一,用戶-潛在因子矩陣Q,表示不同的用戶對于不用元素的偏好程度,1代表很喜歡,0代表不喜歡。比如下面這樣:

              

          矩陣Q

           

            二,潛在因子-音樂矩陣P,表示每種音樂含有各種元素的成分,比如下表中,音樂A是一個偏小清新的音樂,含有小清新這個Latent Factor的成分是0.9,重口味的成分是0.1,優(yōu)雅的成分是0.2……

              

          音樂矩陣P

           

            利用這兩個矩陣,我們能得出張三對音樂A的喜歡程度是:張三對小清新的偏好*音樂A含有小清新的成分+對重口味的偏好*音樂A含有重口味的成分+對優(yōu)雅的偏好*音樂A含有優(yōu)雅的成分+……

              

          分析結(jié)果

           

              

          分析結(jié)果2

           

            即:0.6*0.9+0.8*0.1+0.1*0.2+0.1*0.4+0.7*0=0.69

            每個用戶對每首歌都這樣計(jì)算可以得到不同用戶對不同歌曲的評分矩陣

            。(注,這里的破浪線表示的是估計(jì)的評分,接下來我們還會用到不帶波浪線的R表示實(shí)際的評分):

              

          評分矩陣

           

            因此我們隊(duì)張三推薦四首歌中得分最高的B,對李四推薦得分最高的C,王五推薦B。

            如果用矩陣表示即為:

              

          潛在因子

           

            下面問題來了,這個潛在因子(latent factor)是怎么得到的呢?

            由于面對海量的讓用戶自己給音樂分類并告訴我們自己的偏好系數(shù)顯然是不現(xiàn)實(shí)的,事實(shí)上我們能獲得的數(shù)據(jù)只有用戶行為數(shù)據(jù)。我們沿用 @邰原朗的量化標(biāo)準(zhǔn):單曲循環(huán)=5, 分享=4, 收藏=3, 主動播放=2 , 聽完=1, 跳過=-2 , 拉黑=-5,在分析時能獲得的實(shí)際評分矩陣R,也就是輸入矩陣大概是這個樣子:

            事實(shí)上這是個非常非常稀疏的矩陣,因?yàn)榇蟛糠钟脩糁宦犨^全部音樂中很少一部分。如何利用這個矩陣去找潛在因子呢?這里主要應(yīng)用到的是矩陣的UV分解。也就是將上面的評分矩陣分解為兩個低維度的矩陣,用Q和P兩個矩陣的乘積去估計(jì)實(shí)際的評分矩陣,而且我們希望估計(jì)的評分矩陣

              

          希望的估計(jì)評分矩陣

           

            事實(shí)上這是個非常非常稀疏的矩陣,因?yàn)榇蟛糠钟脩糁宦犨^全部音樂中很少一部分。如何利用這個矩陣去找潛在因子呢?這里主要應(yīng)用到的是矩陣的UV分解。也就是將上面的評分矩陣分解為兩個低維度的矩陣,用Q和P兩個矩陣的乘積去估計(jì)實(shí)際的評分矩陣,而且我們希望估計(jì)的評分矩陣

              

          希望的矩陣2

           

            和實(shí)際的評分矩陣不要相差太多,也就是求解下面的目標(biāo)函數(shù):

              

          目標(biāo)函數(shù)

           

            這里涉及到最優(yōu)化理論,在實(shí)際應(yīng)用中,往往還要在后面加上2范數(shù)的罰項(xiàng),然后利用梯度下降法就可以求得這P,Q兩個矩陣的估計(jì)值。這里我們就不展開說了。例如我們上面給出的那個例子可以分解成為這樣兩個矩陣:

            這兩個矩陣相乘就可以得到估計(jì)的得分矩陣:

              

          得分矩陣

           

            這兩個矩陣相乘就可以得到估計(jì)的得分矩陣:

            將用戶已經(jīng)聽過的音樂剔除后,選擇分?jǐn)?shù)最高音樂的推薦給用戶即可(紅體字)。

              

           

            將用戶已經(jīng)聽過的音樂剔除后,選擇分?jǐn)?shù)最高音樂的推薦給用戶即可(紅體字)。

            在這個例子里面用戶7和用戶8有強(qiáng)的相似性:

            從推薦的結(jié)果來看,正好推薦的是對方評分較高的音樂:

              

          推薦評分高的音樂

           

            從推薦的結(jié)果來看,正好推薦的是對方評分較高的音樂:

              

          推薦評分高的音樂2

           

            本質(zhì)上應(yīng)該都類似,都是從Amazon那條路子下來的。但是這種方式也會遇到問題:

            A)冷啟動的問題,在沒有用戶數(shù)據(jù)的情況下要推哪些歌曲,目前網(wǎng)易云音樂搞了個比較Q的調(diào)查問卷,還是挺有趣的。

            B)同質(zhì)化嚴(yán)重問題,怎么加入新的元素,比如熱門+新歌來補(bǔ)充這塊;

            C)人群變化問題,光靠推薦很明顯不代表每個個體的情況,特別是一些小眾群體,數(shù)據(jù)比較稀疏。這些就需要用戶自己主動搜索和添加、喜歡、下載的方式。

            2.相似歌的推薦

            蝦米、酷狗上都是這樣的歌曲漫游推薦的形式,個人不太提倡這樣的方式,簡單認(rèn)為聽過A歌的人也可能喜歡B,這個差異還是比較大的。而且還是要維護(hù)一堆歌曲的tag標(biāo)簽。

            整體來說,網(wǎng)易云音樂在個性化推薦這塊算法還是花了不少真功夫,所以要給個贊。看到他們在算法招聘、并發(fā)計(jì)算這些實(shí)時場景的介紹比較少,還是希望能夠有機(jī)會在線下能夠有這塊的交流。



          關(guān)鍵詞: 網(wǎng)易云音樂

          評論


          技術(shù)專區(qū)

          關(guān)閉