周圍幾個學生偷偷瞄他,心裡都犯起了嘀咕。
好傢伙。
這個問題難成這樣了?連東神都被說懵逼了?
然而李東並沒有被說懵。
他愣住的原因只是因為……剛才他的腦子裡毫無徵兆地冒出來一些更深的東西。
【當網路寬到極限的時候,不再被看成一堆死板的旋鈕,而是化作了一片連續的“機率分佈”】
【每一個神經元,都成了這片分佈裡的一粒塵埃。】
【訓練也不再是苦哈哈地一個個擰旋鈕,而是這一整片分佈,在一個叫 Wasserstein空間的幾何世界裡,順著最省力的方向流動。】
這是把訓練直接寫成了一道描述質量如何流動的偏微分方程啊。
而順著這道方程往下,那道卡了無數人從懶惰到特徵學習的坎,竟隱隱約約露出了一點能繞過去的縫。
這才是李東懵逼的原因,他立刻就反應了過來……
這是姚先生腦子裡的思路,是姚先生那些還沒來得及說出口、甚至自己都未必理順了的靈感。
它們被薪火相傳進階版的效果,塞進了李東的記憶宮殿裡。
可緊接著李東又覺得不對勁。
剛才他坐在底下聽,姚先生講了那麼久,他腦子裡也只是把舊東西串了串,半點新的沒冒出來。
偏偏是他喃喃問了那一句、姚先生回了他那一句之後。
這股靈感才出現的。
“不會吧……”
“難道非得我開口問才能……觸發這個效果?”
他越想越覺得是這個理。
於是李東抬起頭,有些抱歉地,看了一眼教室裡那一張張還懵著的臉。
對不住了,各位。
接下來我要乾的這些事,真不是我自己想這麼幹的。
……
於是在智班這一屋子人的眼皮子底下……
李東自打問完頭一個問題以後,就完全停不下來了。
“姚先生,那順著這個往下想。”
“要是乾脆別盯著一個個引數看了,把整張網路拉到無限寬,看成一片連續的分佈,訓練是不是就能看作這片分佈的演化?”
。頓一微微,手的筆著握生先姚
。地腹的論理場均平了到切接直,口張一子小這,到料沒他
”。看麼這以可……“
。了出也裡眼他
”?流在度尺麼什著順它,題問個一上撞會就著接你那,流的佈分寫練訓把“
”。唄向方的力省最著順“
。出而口是乎幾東李
”……子法的近遠佈分率機片兩量丈能種一換得,用頂不離距氏歐的常尋,度尺個有得力省可“
”。度尺量度的給輸傳優最“
。分幾了快也速語,去下了接生先姚
”。流度梯的裡間空輸傳優最道一了就,流的佈分片這,度尺當離距nietsressaW 拿“
”。程方分微偏道一到得就你,地落一下往再“
”!程方續連“
。字個五這了出說時同是乎幾人個兩








