第779 章 舉辦大賽之名賣顯卡之實
「你們覺得做什麼好?」
林晚也下定了決心。
周敏直接從上鋪跳下來,拖鞋在地上啪的一聲響。
「做什麼都行啊。人臉識別?現在最火。
自動駕駛?華星肯定感興趣,他們內部不也有這個項目,如果咱們能在部分檢測上有所提高,或許能夠直接被收編呢?
或者做個智能客服,企業買單。」
周敏也摸著嘴角,提出了自己那些不靠譜的想法。
「不要。」林晚搖頭,「人臉識別已經被人做爛了,那些大公司的模型比我們好一萬倍。
自動駕駛,我們連車都沒有,怎麼做?
智能客服,用戶最討厭的就是智能客服,轉人工要轉半天。
脾氣不好的直接給差評了。」
趙天宇坐下,打開外賣盒:「那你有什麼想法?」
林晚此刻也不知道,畢竟大家用的都是華星開源算法,技術上差的不多,主要就是出發點不同。
她滑動滑鼠,在電腦里打開一個文件夾,裡面是一些回憶。
是一些老照片,她爺爺年輕時的黑白照,褪色泛黃,邊緣破損,人臉的輪廓已經模糊得看不清。
奶奶去世前一直說想看清楚爺爺年輕時的樣子,但她找遍了網上的修復軟體,要麼效果太差,要麼要付費,要麼要上傳到雲端。
奶奶不懂什麼是雲端,她只知道把照片發過去,等了好幾天,回來的那張臉根本不是爺爺的樣子。
「我想做老照片修復。」林晚說,「用AI修復破損、模糊、褪色的老照片。
全部在本地運行,不上傳伺服器,保護隱私。
速度要快,幾秒鐘出結果。
效果要好,五官不能變形。」
周敏和趙天宇對視了一眼,然後默默地點了點頭。
周敏說:「市面上的老照片修復軟體都做得很爛,要麼五官變形,要麼細節丟失,要麼要傳雲端。
如果能把這個做好……這東西,真的有人需要。
我奶奶手機里存著我爺爺的照片,也是看不清的。」
趙天宇拿出手機,當場下單了一張華星的頂尖顯卡,iG1601。
這個今年發布的頂尖顯卡,哪怕有著學生優惠,依舊需要7千多塊錢。
她平時省吃儉用攢下的錢,再加上拿到的獎學金,瞬間就沒有了。
她嚴重懷疑華星是不是想要借這個賽事,賣自己的顯卡。
畢竟開源的AI模型在華星的電腦上就是更加適配一點。
「那就干。今晚開始,通宵。」
周敏負責模型架構。
她翻遍了近三年頂會論文,試了七種不同的超分模型。
每一個模型她都跑了一遍,對比各種指標,最後敲定了一個改進版的Real-ESRGAN。
她在原有架構上增加了人臉專用的感知損失模塊,用預訓練的人臉識別模型提取特徵,讓修復後的臉更像本人,同時保留皺紋、痣等個性化特徵。
趙天宇負責部署和優化。
他花了兩個通宵把模型從PyTorch轉成TensorRT,然後用FP16做量化推理,再針對老舊照片的特點做了輸入預處理。
去噪、對比度增強、邊緣保持濾波。
最終在iG1601上實現了0.3秒推理,在CPU上也能做到3秒以內。
其他軟體處理一張照片要幾十秒甚至幾分鐘,他們的產品快了一個數量級。
林晚負責數據和前端。
她爬了十萬張老舊照片數據集,包括民國時期的證件照、七八十年代的家庭合影、九十年代的旅遊照。
她自己寫腳本做數據清洗,標註人臉的landmark和修復區域。
她寫的前端界面簡潔到只有一個按鈕——「上傳照片」,一個進度條,一個結果展示區。
沒有花哨的濾鏡,沒有多餘的GG,連logo都只放在右上角。
「你是不是太極端了?」周敏看著那個比手機計算器還簡單的界面,「好歹加個濾鏡效果啊,用戶喜歡那種。」
林晚從文件夾里拖出一張破損嚴重的老照片。
這是一張民國時期的合影,十七個人,最右邊的人的臉已經完全糊了。
她點擊上傳,0.3秒後,修復結果彈了出來。
十七張臉全部清晰可辨,最右邊那個人原本只剩一片灰色的區域,現在居然還原出了五官輪廓。
更神奇的是,衣服上的褶皺、背景里的老式留聲機、甚至遠處招牌上的字都被模型恢復了出來,雖然有些細節是模型「腦補」的,但看起來非常自然。
趙天宇盯著屏幕看了五秒,說了一句髒話:「操,這也太強了吧。」
初賽提交那天,他們把論文、代碼、演示視頻打包上傳。
視頻里,他們修復了二十張真實的老舊照片,每一張都是網上找的破損圖,修復前後對比放在一起,效果炸裂。
其中一個案例是一位同學提供的曾祖父的照片,拍攝於1940年代,照片被水泡過,半邊臉完全消失。
修復後,那張消失的半邊臉居然被模型補了出來,雖然不知道是不是真的長那樣,但看起來就像真的一樣。
初賽結果公布——憶像團隊排名第一,晉級決賽。
複賽是線下答辯。
三個人穿著清一色的衛衣,站在浙大計算機學院的小禮堂里,面對五位評委。
評委有華星的技術總監、浙大的教授、紅杉的投資人、以及一位來自中科院的AI專家。
林晚站在台上,手心全是汗,但聲音很穩。
她用十分鐘講了三件事:為什麼要做這件事,
因為她的奶奶看不清。
怎麼做的,
用了改進的ESRGAN加人臉感知損失。
做得怎麼樣——單張修復速度0.3秒,測試用戶滿意度96%。
最後她放了一張截圖。
那是一位老奶奶用憶像修復了去世丈夫的照片後,在測試反饋表上寫的一行字,字跡歪歪扭扭,像很多年沒寫過字的人硬撐著握住了筆:
「謝謝你們,讓我又看到了他的樣子。
我都快忘了他長什麼樣了,現在記起來了。」
答辯廳安靜了。
安靜了大概五秒鐘,那個中科院的評委摘下眼鏡擦了擦,投資人低頭翻資料但什麼都沒翻,只是不想讓別人看到自己眼睛裡的那層薄薄的水光。
評委提問環節,沒有人問技術細節,沒有人問商業模式。
一個投資人舉手問了一個題外話:「你們畢業後打算做什麼?」
「咳咳!同學,你們願不願意加入華芯!」
林晚也下定了決心。
周敏直接從上鋪跳下來,拖鞋在地上啪的一聲響。
「做什麼都行啊。人臉識別?現在最火。
自動駕駛?華星肯定感興趣,他們內部不也有這個項目,如果咱們能在部分檢測上有所提高,或許能夠直接被收編呢?
或者做個智能客服,企業買單。」
周敏也摸著嘴角,提出了自己那些不靠譜的想法。
「不要。」林晚搖頭,「人臉識別已經被人做爛了,那些大公司的模型比我們好一萬倍。
自動駕駛,我們連車都沒有,怎麼做?
智能客服,用戶最討厭的就是智能客服,轉人工要轉半天。
脾氣不好的直接給差評了。」
趙天宇坐下,打開外賣盒:「那你有什麼想法?」
林晚此刻也不知道,畢竟大家用的都是華星開源算法,技術上差的不多,主要就是出發點不同。
她滑動滑鼠,在電腦里打開一個文件夾,裡面是一些回憶。
是一些老照片,她爺爺年輕時的黑白照,褪色泛黃,邊緣破損,人臉的輪廓已經模糊得看不清。
奶奶去世前一直說想看清楚爺爺年輕時的樣子,但她找遍了網上的修復軟體,要麼效果太差,要麼要付費,要麼要上傳到雲端。
奶奶不懂什麼是雲端,她只知道把照片發過去,等了好幾天,回來的那張臉根本不是爺爺的樣子。
「我想做老照片修復。」林晚說,「用AI修復破損、模糊、褪色的老照片。
全部在本地運行,不上傳伺服器,保護隱私。
速度要快,幾秒鐘出結果。
效果要好,五官不能變形。」
周敏和趙天宇對視了一眼,然後默默地點了點頭。
周敏說:「市面上的老照片修復軟體都做得很爛,要麼五官變形,要麼細節丟失,要麼要傳雲端。
如果能把這個做好……這東西,真的有人需要。
我奶奶手機里存著我爺爺的照片,也是看不清的。」
趙天宇拿出手機,當場下單了一張華星的頂尖顯卡,iG1601。
這個今年發布的頂尖顯卡,哪怕有著學生優惠,依舊需要7千多塊錢。
她平時省吃儉用攢下的錢,再加上拿到的獎學金,瞬間就沒有了。
她嚴重懷疑華星是不是想要借這個賽事,賣自己的顯卡。
畢竟開源的AI模型在華星的電腦上就是更加適配一點。
「那就干。今晚開始,通宵。」
周敏負責模型架構。
她翻遍了近三年頂會論文,試了七種不同的超分模型。
每一個模型她都跑了一遍,對比各種指標,最後敲定了一個改進版的Real-ESRGAN。
她在原有架構上增加了人臉專用的感知損失模塊,用預訓練的人臉識別模型提取特徵,讓修復後的臉更像本人,同時保留皺紋、痣等個性化特徵。
趙天宇負責部署和優化。
他花了兩個通宵把模型從PyTorch轉成TensorRT,然後用FP16做量化推理,再針對老舊照片的特點做了輸入預處理。
去噪、對比度增強、邊緣保持濾波。
最終在iG1601上實現了0.3秒推理,在CPU上也能做到3秒以內。
其他軟體處理一張照片要幾十秒甚至幾分鐘,他們的產品快了一個數量級。
林晚負責數據和前端。
她爬了十萬張老舊照片數據集,包括民國時期的證件照、七八十年代的家庭合影、九十年代的旅遊照。
她自己寫腳本做數據清洗,標註人臉的landmark和修復區域。
她寫的前端界面簡潔到只有一個按鈕——「上傳照片」,一個進度條,一個結果展示區。
沒有花哨的濾鏡,沒有多餘的GG,連logo都只放在右上角。
「你是不是太極端了?」周敏看著那個比手機計算器還簡單的界面,「好歹加個濾鏡效果啊,用戶喜歡那種。」
林晚從文件夾里拖出一張破損嚴重的老照片。
這是一張民國時期的合影,十七個人,最右邊的人的臉已經完全糊了。
她點擊上傳,0.3秒後,修復結果彈了出來。
十七張臉全部清晰可辨,最右邊那個人原本只剩一片灰色的區域,現在居然還原出了五官輪廓。
更神奇的是,衣服上的褶皺、背景里的老式留聲機、甚至遠處招牌上的字都被模型恢復了出來,雖然有些細節是模型「腦補」的,但看起來非常自然。
趙天宇盯著屏幕看了五秒,說了一句髒話:「操,這也太強了吧。」
初賽提交那天,他們把論文、代碼、演示視頻打包上傳。
視頻里,他們修復了二十張真實的老舊照片,每一張都是網上找的破損圖,修復前後對比放在一起,效果炸裂。
其中一個案例是一位同學提供的曾祖父的照片,拍攝於1940年代,照片被水泡過,半邊臉完全消失。
修復後,那張消失的半邊臉居然被模型補了出來,雖然不知道是不是真的長那樣,但看起來就像真的一樣。
初賽結果公布——憶像團隊排名第一,晉級決賽。
複賽是線下答辯。
三個人穿著清一色的衛衣,站在浙大計算機學院的小禮堂里,面對五位評委。
評委有華星的技術總監、浙大的教授、紅杉的投資人、以及一位來自中科院的AI專家。
林晚站在台上,手心全是汗,但聲音很穩。
她用十分鐘講了三件事:為什麼要做這件事,
因為她的奶奶看不清。
怎麼做的,
用了改進的ESRGAN加人臉感知損失。
做得怎麼樣——單張修復速度0.3秒,測試用戶滿意度96%。
最後她放了一張截圖。
那是一位老奶奶用憶像修復了去世丈夫的照片後,在測試反饋表上寫的一行字,字跡歪歪扭扭,像很多年沒寫過字的人硬撐著握住了筆:
「謝謝你們,讓我又看到了他的樣子。
我都快忘了他長什麼樣了,現在記起來了。」
答辯廳安靜了。
安靜了大概五秒鐘,那個中科院的評委摘下眼鏡擦了擦,投資人低頭翻資料但什麼都沒翻,只是不想讓別人看到自己眼睛裡的那層薄薄的水光。
評委提問環節,沒有人問技術細節,沒有人問商業模式。
一個投資人舉手問了一個題外話:「你們畢業後打算做什麼?」
「咳咳!同學,你們願不願意加入華芯!」