第438章 AI技術的困境
馬國良洪亮的聲音在別墅里迴蕩,笑聲里滿是滿足。
春節的熱鬧像潮水,湧來時淹沒一切,退去時也迅速而徹底。
送走了一批又一批來訪的親戚朋友後,巨大的別墅終於恢復了往日的寧靜。
馬宇騰坐在書房的沙發上,手裡端著一杯已經涼掉的茶。
窗外,冬日的陽光懶洋洋地灑在庭院的草坪上,女兒馬依曼正由妻子鍾虹陪著,搖搖晃晃地追逐一隻蝴蝶,發出咯咯的笑聲。
他拿起手機,撥通了馬明的號碼。
電話幾乎是秒接。
「喂,騰哥,新年好。」
馬明的聲音聽起來有些疲憊,背景里傳來鞭炮噼里啪啦炸響的聲音。
「新年好,還在老家過年嗎?」馬宇騰問。
「嗯,我打算再過兩天就直接回鵬城。老家的親戚太熱情了,我感覺比上班還累。」馬明答道。
「對了,你之前提到的事情,我在去年就在公司里啟動了。」
馬宇騰身體前傾,手肘撐在膝蓋上。
「大數據、雲計算和AI技術的團隊,都到位了?」
「到位了。」馬明的聲音里透出一絲興奮。
「特別是雲計算,我從微軟亞洲研究院挖來一個猛人。」
「哦?」
「他叫王建。之前是微軟亞洲研究院的常務副院長。我跟他聊了一次,把我們要研究『雲計算』的想法一說,他眼睛都亮了。」
「沒過多久,就直接從微軟辭職,飛來鵬城加入了我們。」馬明感嘆道,「這種級別的大牛,真是可遇不可求。」
王建。
這個名字,馬宇騰在前世的記憶里如雷貫耳。
那個頂著巨大壓力,一手締造了阿里飛天雲系統的男人。
沒想到,被馬明提前截胡了。
這確實是個意外之喜。
「很好。」馬宇騰肯定道。
「人到了就行,給他足夠的資源和授權,讓他放手去做。」
「這個你放心。」馬明應下,隨即話鋒一轉,語氣變得有些困惑。
「不過,AI團隊那邊,現在遇到了點麻煩。」
「怎麼了?」
「團隊是搭建起來了,也都是名校畢業的高材生。但是大家都很迷茫,不知道具體該往哪個方向發力。現在就是看論文,復現一些簡單的圖像識別算法,沒什麼突破性的進展。感覺像沒頭蒼蠅一樣亂撞。」
馬宇騰沉默了。
他能理解這種迷茫。
2006年的現在,人工智慧還遠未到後世那種爆發式增長的階段。
主流學界對神經網絡的看法依舊偏向悲觀,深度學習的概念尚未被正式提出。
他想起了穿越前,自己在企鵝公司參與AI相關項目時,曾經花大力氣啃過的大量論文和技術文檔。
那些關於卷積神經網絡、深度信念網絡、無監督逐層預訓練方法的知識,像塵封的檔案,儲存在記憶的深處。
「我明白了。」馬宇騰站起身,走到書桌前。
「對於AI技術我有一點想法,等整理一份東西,給他們指個方向。」
「你還懂具體的AI技術?」馬明那邊明顯愣了一下。
馬宇騰沒有解釋。
「就這樣,我去準備了。」
掛斷電話,他來到書房裡,打開筆記本電腦,新建了一個文檔。
他沒有絲毫猶豫,直接在文檔的標題欄上,敲下了四個字:深度學習。
他開始快速敲擊鍵盤,將記憶中的那些核心概念一一復原。
他首先定義了「深度學習」這個概念,將其描述為一種通過構建具有多個處理層的計算模型來學習數據中抽象特徵的方法。
接著,他詳細闡述了卷積神經網絡(CNN)的結構。
從卷積層如何通過濾波器提取局部特徵,到池化層如何進行降維和特徵選擇,再到全連接層如何進行最終的分類。
他甚至畫出了一個簡易的LeNet-5網絡結構示意圖。
然後,他引入了「深度信念網絡(DBN)」的概念。
他解釋了如何通過堆疊多個受限玻爾茲曼機(RBM)來構建網絡,以及這種結構在處理高維數據時的優勢。
最關鍵的部分,是他提出的「無監督逐層預訓練」方法。
他寫道:直接訓練一個深層網絡是極其困難的,梯度消失或爆炸的問題會導致訓練失敗。
我們可以採用一種逐層貪婪的訓練方法。先無監督地訓練第一層,當第一層訓練好後,再將第一層的輸出作為第二層的輸入,訓練第二層。
以此類推,完成所有隱藏層的預訓練。最後,再用有監督的方式,對整個網絡進行微調。
這套方法,正是那位AI「教父」,圖靈獎和諾貝爾物理學獎得主傑弗里·辛頓未來提出的理論。
它徹底解決了深度神經網絡的訓練難題,開啟了深度學習的黃金時代。
馬宇騰的思路清晰無比,鍵盤敲擊聲在安靜的書房裡連成一片。
他像一個忠實的記錄者,將未來的科技藍圖,一筆一划地描摹到眼前的屏幕上。
一個小時過去,文章的理論框架和實現路徑已經基本成型。
然而,當他試圖為其中的關鍵算法提供嚴謹的數學推導時,他的手指停住了。
屏幕上,光標孤獨地閃爍著。
他皺起眉頭。
他記得結論,記得原理,記得那些算法的名字和作用。
但他記不住具體的數學公式。
那些複雜的矩陣運算,那些偏導數和梯度下降的推演過程,那些涉及到大量線性代數和微積分的符號,在他的記憶里只是一片模糊的陰影。
他兩輩子都不是數學專才。
穿越帶來的記憶力增強,能讓他記住看過的文字和圖像,卻無法讓他憑空掌握一門深奧的學科。
他能記住π約等於3.1415926……,卻無法獨立證明它。
這就像他知道原子彈的原理是鏈式反應,卻造不出原子彈一樣。
他盯著屏幕上那個「梯度下降」的標題,腦子裡空空如也。
他試圖回憶那些公式,但浮現出來的只有一堆雜亂無章的希臘字母。
「該死。」
他低聲咒罵了一句,煩躁地抓了抓頭髮。
難道要讓這份足以改變世界的文檔,卡在最核心的數學證明上?
春節的熱鬧像潮水,湧來時淹沒一切,退去時也迅速而徹底。
送走了一批又一批來訪的親戚朋友後,巨大的別墅終於恢復了往日的寧靜。
馬宇騰坐在書房的沙發上,手裡端著一杯已經涼掉的茶。
窗外,冬日的陽光懶洋洋地灑在庭院的草坪上,女兒馬依曼正由妻子鍾虹陪著,搖搖晃晃地追逐一隻蝴蝶,發出咯咯的笑聲。
他拿起手機,撥通了馬明的號碼。
電話幾乎是秒接。
「喂,騰哥,新年好。」
馬明的聲音聽起來有些疲憊,背景里傳來鞭炮噼里啪啦炸響的聲音。
「新年好,還在老家過年嗎?」馬宇騰問。
「嗯,我打算再過兩天就直接回鵬城。老家的親戚太熱情了,我感覺比上班還累。」馬明答道。
「對了,你之前提到的事情,我在去年就在公司里啟動了。」
馬宇騰身體前傾,手肘撐在膝蓋上。
「大數據、雲計算和AI技術的團隊,都到位了?」
「到位了。」馬明的聲音里透出一絲興奮。
「特別是雲計算,我從微軟亞洲研究院挖來一個猛人。」
「哦?」
「他叫王建。之前是微軟亞洲研究院的常務副院長。我跟他聊了一次,把我們要研究『雲計算』的想法一說,他眼睛都亮了。」
「沒過多久,就直接從微軟辭職,飛來鵬城加入了我們。」馬明感嘆道,「這種級別的大牛,真是可遇不可求。」
王建。
這個名字,馬宇騰在前世的記憶里如雷貫耳。
那個頂著巨大壓力,一手締造了阿里飛天雲系統的男人。
沒想到,被馬明提前截胡了。
這確實是個意外之喜。
「很好。」馬宇騰肯定道。
「人到了就行,給他足夠的資源和授權,讓他放手去做。」
「這個你放心。」馬明應下,隨即話鋒一轉,語氣變得有些困惑。
「不過,AI團隊那邊,現在遇到了點麻煩。」
「怎麼了?」
「團隊是搭建起來了,也都是名校畢業的高材生。但是大家都很迷茫,不知道具體該往哪個方向發力。現在就是看論文,復現一些簡單的圖像識別算法,沒什麼突破性的進展。感覺像沒頭蒼蠅一樣亂撞。」
馬宇騰沉默了。
他能理解這種迷茫。
2006年的現在,人工智慧還遠未到後世那種爆發式增長的階段。
主流學界對神經網絡的看法依舊偏向悲觀,深度學習的概念尚未被正式提出。
他想起了穿越前,自己在企鵝公司參與AI相關項目時,曾經花大力氣啃過的大量論文和技術文檔。
那些關於卷積神經網絡、深度信念網絡、無監督逐層預訓練方法的知識,像塵封的檔案,儲存在記憶的深處。
「我明白了。」馬宇騰站起身,走到書桌前。
「對於AI技術我有一點想法,等整理一份東西,給他們指個方向。」
「你還懂具體的AI技術?」馬明那邊明顯愣了一下。
馬宇騰沒有解釋。
「就這樣,我去準備了。」
掛斷電話,他來到書房裡,打開筆記本電腦,新建了一個文檔。
他沒有絲毫猶豫,直接在文檔的標題欄上,敲下了四個字:深度學習。
他開始快速敲擊鍵盤,將記憶中的那些核心概念一一復原。
他首先定義了「深度學習」這個概念,將其描述為一種通過構建具有多個處理層的計算模型來學習數據中抽象特徵的方法。
接著,他詳細闡述了卷積神經網絡(CNN)的結構。
從卷積層如何通過濾波器提取局部特徵,到池化層如何進行降維和特徵選擇,再到全連接層如何進行最終的分類。
他甚至畫出了一個簡易的LeNet-5網絡結構示意圖。
然後,他引入了「深度信念網絡(DBN)」的概念。
他解釋了如何通過堆疊多個受限玻爾茲曼機(RBM)來構建網絡,以及這種結構在處理高維數據時的優勢。
最關鍵的部分,是他提出的「無監督逐層預訓練」方法。
他寫道:直接訓練一個深層網絡是極其困難的,梯度消失或爆炸的問題會導致訓練失敗。
我們可以採用一種逐層貪婪的訓練方法。先無監督地訓練第一層,當第一層訓練好後,再將第一層的輸出作為第二層的輸入,訓練第二層。
以此類推,完成所有隱藏層的預訓練。最後,再用有監督的方式,對整個網絡進行微調。
這套方法,正是那位AI「教父」,圖靈獎和諾貝爾物理學獎得主傑弗里·辛頓未來提出的理論。
它徹底解決了深度神經網絡的訓練難題,開啟了深度學習的黃金時代。
馬宇騰的思路清晰無比,鍵盤敲擊聲在安靜的書房裡連成一片。
他像一個忠實的記錄者,將未來的科技藍圖,一筆一划地描摹到眼前的屏幕上。
一個小時過去,文章的理論框架和實現路徑已經基本成型。
然而,當他試圖為其中的關鍵算法提供嚴謹的數學推導時,他的手指停住了。
屏幕上,光標孤獨地閃爍著。
他皺起眉頭。
他記得結論,記得原理,記得那些算法的名字和作用。
但他記不住具體的數學公式。
那些複雜的矩陣運算,那些偏導數和梯度下降的推演過程,那些涉及到大量線性代數和微積分的符號,在他的記憶里只是一片模糊的陰影。
他兩輩子都不是數學專才。
穿越帶來的記憶力增強,能讓他記住看過的文字和圖像,卻無法讓他憑空掌握一門深奧的學科。
他能記住π約等於3.1415926……,卻無法獨立證明它。
這就像他知道原子彈的原理是鏈式反應,卻造不出原子彈一樣。
他盯著屏幕上那個「梯度下降」的標題,腦子裡空空如也。
他試圖回憶那些公式,但浮現出來的只有一堆雜亂無章的希臘字母。
「該死。」
他低聲咒罵了一句,煩躁地抓了抓頭髮。
難道要讓這份足以改變世界的文檔,卡在最核心的數學證明上?