第392章 李東來了
第390章 李東來了
中午休息的時候,主會場外的大廳里。
人群三三兩兩的湊在一起,也不知道在討論些什麼,時不時的還會爆發出一陣的老錢笑聲。
李東和唐傑站在大廳一角。
「怎麼樣,聽出門道沒有?」
看本書最新章節,請訪問s͓͓̽̽t͓͓̽̽o͓͓̽̽5͓͓̽̽5͓͓̽̽.c͓͓̽̽o͓͓̽̽m
唐傑端著一杯咖啡問道。
李東:「底層範式全在切變道。」
「眼光夠毒的呀。」
唐傑有些詫異的說道。
「那你再往深處琢磨琢磨,這幫巨頭為什麼不約而同,非要趕在這個節骨眼上改寫技術路線?」
李東看著他:「為什麼?」
「撞上Data Wall(數據牆)了唄。」
「網際網路上那些高質量的預訓練語料,Github開原始碼、arXiv論文庫、優質百科.
早就被各家用爬蟲吸乾了。」
「萬億參數規模的模型每年胃口都在變大,但是現在大家都沒東酉餵了。」
「所以你看今天台上講的那些套路。」
唐傑教授抬了抬下巴。
「在Inference端堆算力,靠慢思考平攤成本,這叫避開數據牆。」
「花重金搞RLHF,弄一套刁鑽的Reward Model去給生成的合成數據打分提純,靠模型自己左右互搏,這叫虛空造數據。」
「說穿了全是被高質量數據枯竭給硬生生逼出來的。」
李東若有所思地點了點頭,然後又想到了一個問題。
「那模型架構呢?頂會的Paper全公開了,哪怕只照著公式復現他們不怕別人追上嗎?」
「Paper這玩意兒,只是個前瞻PR。」唐傑笑了笑說道。
「可真正拉開代差的核心壁壘有兩樣,Paper里從來都不會寫半個字。」
「一樣是Infra,另一樣是基於真實交互反饋的數據飛輪。」
「這個護城河一旦轉起來,後來的人光靠砸錢買算力,是不可能彎道超車的。」
李東沉默了。
就在這時一個頭髮花白的老者端著咖啡走了過來,隔著幾步就笑著打招呼。
「唐!」
唐傑回頭一看,也笑著迎上去握手。
來人是KAIST的金教授,做具身智能和機器人方向的,前兩年起就一直在用唐傑他們開源的視覺—語言大模型跑端側部署的控制實驗,兩人在別的學術論壇也碰過幾面。
這一回韓國做東道主,金教授熱情得不行,張口就邀請唐傑會後去他們實驗室里坐一坐。
客套了幾句唐傑很自然地介紹道。
「金教授,給您介紹一下,這位是李東教授。」
「李教授,幸會。」金教授禮貌地伸出手,嘴裡默念了一遍這個名字。
李東。
這名字,聽著有點耳熟。
就在他暗自琢磨的工夫,唐傑補了一句。
「菲爾茲獎得主。」
金教授握著李東的手,整個人都僵住了。
然後連聲音都有哦點變調了。
「哦!」
「原來是您呀!」
金教授先前那點矜持早就沒了,握著李東的手連晃了好幾下,又是久仰,又是掏手機,非要留個聯繫方式不可。
臨走前還說他們基礎科學研究院那邊一直想請李教授去做場高維流形的報告,這回可算逮著真人了。
金教授前腳剛走,又有人湊了過來。
這回是國內一家大廠智能雲那邊的何姓負責人。
他先客客氣氣地同唐傑打了招呼,兩邊畢竟在B端生態上是同行,所以還是很熟的。
等唐傑把李東介紹給他的時候,這位何總也是一樣的流程。
先是客氣地點頭,等聽到「菲爾茲獎得主」時,整個人一下熱情了起來。
「李教授!久仰久仰!回頭到了國內,一定登門拜訪!」
再往後,來打招呼的人,就一撥接著一撥了。
有歐洲頂級實驗室的主席,有矽谷核心引擎組的資深研究員,有掛著參展商工牌的大廠戰略決策人,也有壯起膽子湊過來想合影的學生。
唐傑在圈子裡的江湖地位擺在那裡,走到哪兒都少不了人來寒暄。
而每一回,他都會笑呵呵地把身邊的李東介紹一遍。
十個人里,總有八九個走一遍熟悉的流程如此三番五次。
到了下午,李東也來了這場頂會的消息,便在會場裡傳開了。
展區一角的咖啡台邊,兩個掛著參展商工牌的人正湊在一處閒聊。
一位是某家頂級雲計算大廠的戰略總監,另一位是一家頭部AI晶片公司的市場負責人。
「李東也來了。」戰略總監說。
「是啊。」
「真沒想到這尊做純數的大神也對AI感興趣。」
「哎,這有什麼想不到的。」
「現在底層算力和AGI範式就是黑洞,什麼前沿學科都得往裡吸。」
「你看陶哲軒他們那幫搞純數的,不也全下場玩AI for Math了嗎?估計李東這趟過來,也是想在神經正切核(NTK)或者參數化優化那邊找降維打擊的切入點。」
市場負責人想了想,深以為然地點了點頭。
兩人沒再多說,目光卻不約而同地往大廳李東所在的方向投去。
與此同時,主會場側面的貴賓休息區。
亞當·凱利、戴維·朗、西蒙·哈特,正在和彼得·諾維格聊天。
幾個人有一搭沒一搭地聊著。
就在這時,一個人從休息區外快步走到了西蒙·哈特身邊,附在他耳邊低聲說了一句什麼。
西蒙·哈特詫異了一下。
隨後他點了點頭表示知道了。
「是出什麼Bug了嗎?」亞當·凱利隨口問道。
西蒙·哈特看了幾人一眼,言簡意賅。
「李東也到了。」
在場幾個人都怔了一下。
尤其是彼得·諾維格。
當初克拉拉在電話里報出這個名字的時候,他確實沒想起來這人是誰。
可當天他就回過味兒來了。
菲爾茲獎史上最年輕的得主。
前一陣子,這名字在學術圈的新聞里被瘋狂輪播,可能其他行業不知道李東長什麼樣,但是絕對沒人不知道這個名字。
而且李東這個人,在深度學習的深水區里,本來就是個香餑餑。
當年那套降維算法1.0,很多大廠其實已經私下在做適配了,雖然還不是完全適配,但整個行業其實也是吃到了一點紅利的。
而且可別忘了。
李東手裡還有一套到現在也沒開源的降維算法呢。
那東西只要落到誰的手裡,誰就能將整個大模型的訓練效率和內存開銷,當場撕開代差。
所以這一瞬間在場那三個人,都戒備地看了一眼身旁的另外兩位。
然後,三個人幾乎是不約而同地朝諾維格打了聲招呼就轉身朝著同一個方向去了。
諾維格望著那三道離開的身影也站起身,跟了上去。
那套降維算法,他當然也感興趣。
不過比起這個,他更在意的是————
這個李東和自己的寶貝女兒,到底是什麼關係?
難道,真的僅僅只是合作者關係嗎?