第68章 時間殺手&多維數據+算法碾壓!(求追讀!Orz~)
張智東也沒怎麼意外幾人的反應。
因為今天下午,他在解析悠米社區此次更新的時候,也是眾人現在這副不可思議的表情。
「另外,極光科技敢放出如此全面的用戶信息,而不擔心信息泄露,必然已經建立起一套嚴密的數據安全與合規體系。」
說實話,現階段的網際網路公司,不論國內外,都不怎麼重視用戶信息安全問題。
很明顯的一個現象。
這時候還沒有「用戶須知」、「隱私政策」這些告知功能。
只有用戶點了「我同意」,平台才算是與用戶達成授權原則,合規合法的獲取並利用用戶信息。
直到12年,國內才首次明確,未經用戶同意,不得收集、使用個人信息的原則。
阿美利加也差不多在同期,推出了類似的法案。
也因此,現階段,幾乎所有網際網路公司,都在肆無忌憚的以售賣用戶信息的方式盈利。
僅有阿美利加極少數網際網路巨頭,會以較為簡單的方式告知用戶。
究其根本,這時候很少有人能意識到其中的價值。
企鵝意識到了,但他們沒有高效處理這些數據的能力。
相較於悠米社區,他們手上的數據更加駁雜,至少有30%用戶資料虛假,「清洗」起來自然也更加困難。
悠米社區此番轉型開放平台,同步推出「用戶須知」,估計也是為了規避一些可能會有的麻煩,也可能是監管部門的要求。
畢竟,極光科技是要在明面上,大規模向開發者提供用戶信息。
哪怕是為了提防同行的針對,也要提前做好應對措施。
但說實話,除了腦殘,還真沒人敢在這方面搞事情。
一方面是因為,張智東驗證過,通過悠米社區提供的API接口,調用數據時,系統會自動模糊敏感欄位,以保護用戶隱私。
並且運用了某種高強度加密算法,抗破解性極強,幾乎無法被攻破。
在「用戶須知」中,極光科技還表明,已成立「倫理委員會」,由復旦法學院教授領銜,定期進行數據審查,確保所有數據使用場景合規合法。
雖然沒有用戶會注意,但很顯然,極光科技已經提前準備好了多重護身符。
另一方面,正如上面所提到的,幾乎所有網際網路公司,在這方面的吃相,都比極光科技難看得多。
真要有人敢在這上面找事兒,極光科技直接捅破這層窗戶紙,所有人都得吃癟。
極光科技甚至還可能,藉此會成為唯一一朵白蓮花。
按照他們之前的行事風格,真有可能會幹出這種事兒。
小馬哥眉頭皺得越來越緊。
極光科技給他的感覺很糟糕。
技術實力強勁,怪招層出不窮,行事風格卻又格外縝密,處處料敵先機,完全不像是一家初創公司。
更糟糕的是,這家公司的主攻方向還是社交領域。
即便體量還小,但已然讓他嗅到了威脅的氣息。
然而,這還沒完。
張智東繼續拋炸彈。
「還有一項我認為需要馬上集中攻關的技術,那就是悠米社區的『內容推薦機制』。」
光嘴上說不夠明顯,張智東直接操作起電腦。
其餘三人不自覺的坐正身子,聚精會神看著他現場演示。
通過下面研發人員的個人信息和郵箱,張智東註冊了兩個新帳號,一男一女。
女生興趣標籤選擇電影、美食、萌寵、美妝,地理位置選擇京城HD區。
男生興趣標籤選擇音樂、籃球、數碼、遊戲,地理位置選擇深市南山區。
註冊完成,張智東將兩個帳號的首頁,一左一右投屏在屏幕之上,翻看「新鮮事」版塊中的內容。
幾人驚訝的發現,兩個帳號主頁推送的信息差異極大。
差不多有近半信息,跟之前選擇的興趣標籤相關,剩下的則是當前熱點新聞資訊。
將三人的表情盡收眼底,張智東解釋道:「其實,在轉型開放平台之前,校內網就已經在試運行這種個性化推送算法,只不過還不像現在這麼精準。」
「我們的研發部門,也已經在攻關了,只不過暫時還沒有太大的收穫。」
「而這次更新之後,這套算法發生了質變,極光科技似乎在其中引入了注意力機制,會動態分配不同用戶行為的權重,並實時更新推薦結果。」
張智東邊說邊演示,在男生帳號多次搜索「考研資料」,並對搜索到的內容點讚、評論。
女生帳號則是搜索「瑜伽」,進行相同的操作。
隨後返回首頁,繼續翻看「新鮮事」。
差不多五分鐘過後,小馬哥三人眼中的疑惑,逐漸變為驚訝,然後是震驚。
因為男生帳號的首頁,竟然出現了教育類內容,其中有一條還是深市大學的講座信息。
而這位男生選擇的地理位置,正是深市!
女生的帳號,則是推送了瑜伽、健身等相關信息。
看著屏幕中的那位,臉型很像「嫩牛五方」的不知名女明星的健身自拍照,前不算禿後很翹,小馬哥卻完全無心觀賞,一拍桌子。
「馬上跟進!」
這種內容推薦算法,簡直就是「用戶時間殺手」!
他甚至都生出了一種,以這套算法為核心,把QQ門戶徹底改頭換面的想法。
再換個角度,如果把這套算法,用在GG精準推送上呢?
那GG費不得直接起飛嘍!
劉馳平也想到了這點,心頭有些火熱:「研發部那邊進展怎麼樣,需要多久能攻破這套算法?」
「半年,一年,或者兩年。」張智東也給不出準確的時間,但不妨礙他先澆滅他們急功近利的幻想。
首先是技術難度。
目前,行業內主流的推薦模型是「協同過濾」,每日離線計算,次日更新推薦內容。
企鵝也是如此。
而極光科技的推薦模型,是基於注意力機制的混合模型,並且可進行動態行為捕捉,五分鐘內更新推薦結果。
之前誰也沒見過這麼離譜的推薦模型,極光科技還採取了加密、混淆等多種技術手段,保護算法的核心邏輯,完全無法窺探算法全貌。
並且,想都不用想,極光科技絕對申請了專利。
光是技術摸索,就不知要耗去多少時間。
另一方面,則是數據維度的差距。
極光科技手上掌握著2000+標籤的用戶信息,覆蓋消費、學習、社交等諸多場景,並且有著極強的數據處理能力。
甚至還可以借用交大的超算。
也因此,極光科技可以十分高效的驗證、訓練模型。
而他們企鵝手上,只掌握著100+標籤的用戶信息。
由於匿名的關係,即便他們能仿照對方的數據採集維度,也無法保障信息的真實性。
這代表著,他們不僅訓練模型的難度更高,技術水平相等的情況下,推薦的準確性也必然不如對方。
很無奈,但這卻是現實。
他們被極光科技以多維數據+算法碾壓了。。
因為今天下午,他在解析悠米社區此次更新的時候,也是眾人現在這副不可思議的表情。
「另外,極光科技敢放出如此全面的用戶信息,而不擔心信息泄露,必然已經建立起一套嚴密的數據安全與合規體系。」
說實話,現階段的網際網路公司,不論國內外,都不怎麼重視用戶信息安全問題。
很明顯的一個現象。
這時候還沒有「用戶須知」、「隱私政策」這些告知功能。
只有用戶點了「我同意」,平台才算是與用戶達成授權原則,合規合法的獲取並利用用戶信息。
直到12年,國內才首次明確,未經用戶同意,不得收集、使用個人信息的原則。
阿美利加也差不多在同期,推出了類似的法案。
也因此,現階段,幾乎所有網際網路公司,都在肆無忌憚的以售賣用戶信息的方式盈利。
僅有阿美利加極少數網際網路巨頭,會以較為簡單的方式告知用戶。
究其根本,這時候很少有人能意識到其中的價值。
企鵝意識到了,但他們沒有高效處理這些數據的能力。
相較於悠米社區,他們手上的數據更加駁雜,至少有30%用戶資料虛假,「清洗」起來自然也更加困難。
悠米社區此番轉型開放平台,同步推出「用戶須知」,估計也是為了規避一些可能會有的麻煩,也可能是監管部門的要求。
畢竟,極光科技是要在明面上,大規模向開發者提供用戶信息。
哪怕是為了提防同行的針對,也要提前做好應對措施。
但說實話,除了腦殘,還真沒人敢在這方面搞事情。
一方面是因為,張智東驗證過,通過悠米社區提供的API接口,調用數據時,系統會自動模糊敏感欄位,以保護用戶隱私。
並且運用了某種高強度加密算法,抗破解性極強,幾乎無法被攻破。
在「用戶須知」中,極光科技還表明,已成立「倫理委員會」,由復旦法學院教授領銜,定期進行數據審查,確保所有數據使用場景合規合法。
雖然沒有用戶會注意,但很顯然,極光科技已經提前準備好了多重護身符。
另一方面,正如上面所提到的,幾乎所有網際網路公司,在這方面的吃相,都比極光科技難看得多。
真要有人敢在這上面找事兒,極光科技直接捅破這層窗戶紙,所有人都得吃癟。
極光科技甚至還可能,藉此會成為唯一一朵白蓮花。
按照他們之前的行事風格,真有可能會幹出這種事兒。
小馬哥眉頭皺得越來越緊。
極光科技給他的感覺很糟糕。
技術實力強勁,怪招層出不窮,行事風格卻又格外縝密,處處料敵先機,完全不像是一家初創公司。
更糟糕的是,這家公司的主攻方向還是社交領域。
即便體量還小,但已然讓他嗅到了威脅的氣息。
然而,這還沒完。
張智東繼續拋炸彈。
「還有一項我認為需要馬上集中攻關的技術,那就是悠米社區的『內容推薦機制』。」
光嘴上說不夠明顯,張智東直接操作起電腦。
其餘三人不自覺的坐正身子,聚精會神看著他現場演示。
通過下面研發人員的個人信息和郵箱,張智東註冊了兩個新帳號,一男一女。
女生興趣標籤選擇電影、美食、萌寵、美妝,地理位置選擇京城HD區。
男生興趣標籤選擇音樂、籃球、數碼、遊戲,地理位置選擇深市南山區。
註冊完成,張智東將兩個帳號的首頁,一左一右投屏在屏幕之上,翻看「新鮮事」版塊中的內容。
幾人驚訝的發現,兩個帳號主頁推送的信息差異極大。
差不多有近半信息,跟之前選擇的興趣標籤相關,剩下的則是當前熱點新聞資訊。
將三人的表情盡收眼底,張智東解釋道:「其實,在轉型開放平台之前,校內網就已經在試運行這種個性化推送算法,只不過還不像現在這麼精準。」
「我們的研發部門,也已經在攻關了,只不過暫時還沒有太大的收穫。」
「而這次更新之後,這套算法發生了質變,極光科技似乎在其中引入了注意力機制,會動態分配不同用戶行為的權重,並實時更新推薦結果。」
張智東邊說邊演示,在男生帳號多次搜索「考研資料」,並對搜索到的內容點讚、評論。
女生帳號則是搜索「瑜伽」,進行相同的操作。
隨後返回首頁,繼續翻看「新鮮事」。
差不多五分鐘過後,小馬哥三人眼中的疑惑,逐漸變為驚訝,然後是震驚。
因為男生帳號的首頁,竟然出現了教育類內容,其中有一條還是深市大學的講座信息。
而這位男生選擇的地理位置,正是深市!
女生的帳號,則是推送了瑜伽、健身等相關信息。
看著屏幕中的那位,臉型很像「嫩牛五方」的不知名女明星的健身自拍照,前不算禿後很翹,小馬哥卻完全無心觀賞,一拍桌子。
「馬上跟進!」
這種內容推薦算法,簡直就是「用戶時間殺手」!
他甚至都生出了一種,以這套算法為核心,把QQ門戶徹底改頭換面的想法。
再換個角度,如果把這套算法,用在GG精準推送上呢?
那GG費不得直接起飛嘍!
劉馳平也想到了這點,心頭有些火熱:「研發部那邊進展怎麼樣,需要多久能攻破這套算法?」
「半年,一年,或者兩年。」張智東也給不出準確的時間,但不妨礙他先澆滅他們急功近利的幻想。
首先是技術難度。
目前,行業內主流的推薦模型是「協同過濾」,每日離線計算,次日更新推薦內容。
企鵝也是如此。
而極光科技的推薦模型,是基於注意力機制的混合模型,並且可進行動態行為捕捉,五分鐘內更新推薦結果。
之前誰也沒見過這麼離譜的推薦模型,極光科技還採取了加密、混淆等多種技術手段,保護算法的核心邏輯,完全無法窺探算法全貌。
並且,想都不用想,極光科技絕對申請了專利。
光是技術摸索,就不知要耗去多少時間。
另一方面,則是數據維度的差距。
極光科技手上掌握著2000+標籤的用戶信息,覆蓋消費、學習、社交等諸多場景,並且有著極強的數據處理能力。
甚至還可以借用交大的超算。
也因此,極光科技可以十分高效的驗證、訓練模型。
而他們企鵝手上,只掌握著100+標籤的用戶信息。
由於匿名的關係,即便他們能仿照對方的數據採集維度,也無法保障信息的真實性。
這代表著,他們不僅訓練模型的難度更高,技術水平相等的情況下,推薦的準確性也必然不如對方。
很無奈,但這卻是現實。
他們被極光科技以多維數據+算法碾壓了。。