殘差網路。Res。
前世,這篇論文在2015年12月發表,第一作者正是任少卿。
它不僅橫掃了當年所有計算機視覺的頂級競賽,更從根本上改寫了整個深度學習的工程正規化。
從此以後,“網路可以無限加深”不再是空想,而是被數學和實驗雙重驗證的事實。
它是後來所有大模型架構的地基之一。
沒有殘差連線,就沒有後來的GPT,沒有BERT,沒有任何你能叫得出名字的大語言模型。
而現在是2014年4月。
任少卿提前了將近一年半。
顧嶼閉上眼睛。
前世的記憶潮水般漫上來,不受控制。
2020年。他拿到天使輪的那個夏天,北京五道口的一間地下室辦公室,八個人,六臺電腦,空調壞了三天沒人修。
他站在白板前畫Transformer的架構圖,給團隊講什麼是自注意力機制,什麼是多頭注意力,什麼是位置編碼。那時候他以為自己看到了未來。
2022年。A輪融資到賬,團隊擴到西十多人,搬進了望京的寫字樓。
他們基於Transformer訓練中文大語言模型,做垂首行業應用,對標ChatGPT。燒了兩個多億,模型效果勉強能打。投資人說,再堅持一輪,B輪估值翻三倍,上市不是夢。
他信了。
然後2024年底,DeepSeek的技術報告發了出來。
不到六百萬美金的訓練成本。
用了一種叫MoE的混合專家架構,讓模型學會了“只啟用需要的那部分引數”,不用的部分首接休眠。
配合極致的底層算力最佳化和開源策略,效果首接對標上億美金訓練出來的頂級模型。
一夜之間,他那套靠堆引數、堆資料、堆算力硬撐出來的商業故事,全部歸零。
投資人撤資的郵件是凌晨兩點發來的,措辭很客氣,意思很殘忍:賽道邏輯變了,我們需要重新評估。
客戶解約的電話是第二天早上九點打來的,對方甚至沒聽他解釋完,只說了一句“DeepSeek免費開源的效果比你們收費的還好,我們沒有理由繼續付費”。
團隊散夥那天,核心演算法工程師把工牌放在會議桌上,什麼都沒說,轉身走了。
門沒關嚴,走廊裡傳來的聲音很輕,但顧嶼聽得清清楚楚。
2025年春天,公司清算完畢。
他在錦城的出租屋裡,盯著天花板上那道裂縫,想了很久很久。
然後他重生了。
所以他對AI這條路的理解,從來不是什麼“前瞻性預判”。
。人的死拍頭浪的局終被後最,坑個一每過踩,步一每的上路條那過走手親是他
。調麼怎該率習學候時型模大練訓道知他
。坑多有習學化強饋反類人的FHLR道知
。來下打本把能麼什為略策由路的EoM道知
。疤傷的他是也,武的他是識知些這
。人於制力算,夠不本資,晚太步起:上事件三在死他世前
。了來過翻都全,世一這
。夠,力算的地基安雅
。夠,備儲金資的級億百
。夠,度才人的隊團章九加卿任
:事的鍵關更件一了明證,料資驗實路網差殘份這的前面他在擺才剛卿任而
。件條礎基的遷躍構架用通更向路網經神積卷從了備經己,才人和的代時個這
。表發的文論remrofsnarT年7102到走芽萌的制機力意注年4102從才,年三整整了花界世全,世前
。了路老的”任是就錢有“條那谷矽走算打不他,世一這但
。豬大的重笨頭那做不,力算價天燒不,數引堆不
。路的keeSpeeD走要他
。構架的明聰最做,源資的最用
。錯糾己自、理推己自、擇選己自會學型模讓
。乾擰都力算滴一每把化佳最程工的致極用,用啟需按數引讓EoM用
。了死經己司公的他,晚太得來它但,了到做keeSpeeD世前
。事件這做己自要他,子輩這
。做頭從
。上線曲度的升攀靜安條那上幕螢在焦聚新重線視,睛眼開睜地慢緩嶼顧
。題問學考思在闆老為以概大,應反的他著等邊旁在還卿任
”。卿“
。輕風淡雲的貫一了復恢音聲的嶼顧
”。在“
”?字名麼什備準你,西東個這“
:想了想卿任
”。seR稱簡。krowlaudiseR。路網差殘“
。頭點了點嶼顧
。上臉卿任在落目,上面桌在放疊手雙,拉了拉前往子椅把他後然
”。題問個一你問先我。聊再兒會待們我事的文論“
”。說你“
”?麼什做在上質本,路網經神積卷“








