第5章
框上,“下午兩點(diǎn)開個(gè)會(huì),你跟大家認(rèn)識(shí)一下?!?br>“直接認(rèn)識(shí)就行了?不用走什么流程?”
“你是聯(lián)合創(chuàng)始人,走什么流程?”
我點(diǎn)點(diǎn)頭。
“對(duì)了——”他從口袋里掏出一張黑卡遞給我,“安家費(fèi)??ɡ镂迨f(wàn),隨便花。你先把生活安頓好?!?br>我接過卡,沒推辭。
這不是施舍,是合作的一部分。
下午兩點(diǎn),會(huì)議室。
十二個(gè)算法工程師坐了一圈,看到我進(jìn)來(lái),表情各異。
有人好奇,有人觀望,有一個(gè)戴眼鏡的年輕人直接舉手。
“陳總,這位是?”
陳逸飛站在白板前:“給大家介紹一下,林墨。逸飛智投算法框架的原始作者。從今天起,他是公司的聯(lián)合創(chuàng)始人兼首席技術(shù)官?!?br>安靜了兩秒。
戴眼鏡的年輕人又開口了:“V1.0到V3.7都是您寫的?”
“是?!?br>“那……”他推了推眼鏡,“您怎么三年前就離開了?”
“個(gè)人原因。”
他還想問,被旁邊的人拉了一下。
我走到白板前,拿起筆。
“把你們這三年的迭代方向和實(shí)驗(yàn)數(shù)據(jù)發(fā)給我。今天晚上我看完,明天給方案?!?br>有人小聲嘀咕:“一晚上就能給方案?”
我沒解釋。
回到辦公室,我打開工作站,十二份技術(shù)報(bào)告陸續(xù)發(fā)過來(lái)。
我一份一份看。
到晚上十一點(diǎn)的時(shí)候,我看完了。
問題出在他們?cè)噲D在原有的注意力分配層上做橫向擴(kuò)展——方向錯(cuò)了。V3.7的瓶頸不在寬度,在深度。
需要重新設(shè)計(jì)一套縱向遞歸的上下文感知機(jī)制。
這個(gè)思路,我三年前就想過,只是當(dāng)時(shí)沒來(lái)得及實(shí)現(xiàn)。
我打開代碼編輯器,開始寫。
凌晨四點(diǎn),初版框架搭完了。
不夠——還需要大規(guī)模測(cè)試數(shù)據(jù)來(lái)驗(yàn)證。
但方向是對(duì)的。
我存好代碼,伸了個(gè)懶腰。
窗外天快亮了。
手機(jī)屏幕亮了一下。是一條新聞推送——
“清瑤傳媒宣布與明途集團(tuán)達(dá)成戰(zhàn)略合作,顧清瑤稱將推出全新AI智能投放平臺(tái)。”
我看了一眼標(biāo)題,退出了頁(yè)面。
她要搞AI投放平臺(tái)?
用的還是我三年前給她搭的那套老架構(gòu)?
有意思。
第二天早上九點(diǎn),我準(zhǔn)時(shí)出現(xiàn)在會(huì)議室。
白板上已經(jīng)寫滿了公式和架構(gòu)圖。
十二個(gè)工程師到齊了,看著白板上的東西,表情從好奇變成了震驚。
“這是——縱向遞歸上下文感知?”戴眼鏡的年輕人站起來(lái)湊近看。
“對(duì)?!蔽抑钢詈诵牡哪K,“你們這三年一直在原有的注意力層上做橫向擴(kuò)展,想通過增加參數(shù)量來(lái)提升精準(zhǔn)度。但V3.7的架構(gòu)天花板就在那兒,再怎么擴(kuò)也過不了87%?!?br>“那這個(gè)縱向遞歸——”
“換個(gè)思路。不是讓模型看更多的東西,而是讓它對(duì)同一組數(shù)據(jù)做更深的理解。類似于人看一段話,第一遍看到字面意思,第二遍看到情緒,第三遍看到動(dòng)機(jī)?!?br>“理論上可行,但計(jì)算成本——”
“我昨晚寫的框架里做了剪枝優(yōu)化,計(jì)算量只增加12%?!?br>我把代碼投到屏幕上。
會(huì)議室安靜了大概十秒。
然后那個(gè)戴眼鏡的年輕人——后來(lái)我知道他叫程遠(yuǎn)——說(shuō)了句:“操?!?br>陳逸飛在后面笑出了聲。
“今天開始分組驗(yàn)證?!蔽以诎装迳蟿澚巳齻€(gè)模塊,“程遠(yuǎn)帶一組做數(shù)據(jù)預(yù)處理適配,第二組做推理引擎的遞歸層實(shí)現(xiàn),第三組負(fù)責(zé)剪枝優(yōu)化的壓力測(cè)試?!?br>“周期呢?”有人問。
“兩周出初步結(jié)果。一個(gè)月內(nèi)上線內(nèi)測(cè)?!?br>程遠(yuǎn)抬頭看我:“一個(gè)月?我們之前一個(gè)迭代周期是三個(gè)月?!?br>“因?yàn)槟銈冎胺较虿粚?duì),大部分時(shí)間花在了試錯(cuò)上。方向?qū)α耍俣染推饋?lái)了?!?br>沒人再**。
散會(huì)后程遠(yuǎn)追出來(lái)。
“林總——”
“叫我老林就行?!?br>“老林?!彼q豫了一下,“我之前不太了解您的情況,剛才說(shuō)話如果冒犯了——”
“沒有。有問題直接問,比客氣有用?!?br>他點(diǎn)頭,跑回工位了。
中午我沒去食堂,在辦公室泡了碗面。
手機(jī)上多了二十幾條未讀消息。
大部分是不認(rèn)識(shí)的號(hào)碼——估計(jì)是記者。
還有一條是顧清瑤發(fā)的。
奇怪,我不是**她的對(duì)話框嗎?
是短信。
“林墨
“你是聯(lián)合創(chuàng)始人,走什么流程?”
我點(diǎn)點(diǎn)頭。
“對(duì)了——”他從口袋里掏出一張黑卡遞給我,“安家費(fèi)??ɡ镂迨f(wàn),隨便花。你先把生活安頓好?!?br>我接過卡,沒推辭。
這不是施舍,是合作的一部分。
下午兩點(diǎn),會(huì)議室。
十二個(gè)算法工程師坐了一圈,看到我進(jìn)來(lái),表情各異。
有人好奇,有人觀望,有一個(gè)戴眼鏡的年輕人直接舉手。
“陳總,這位是?”
陳逸飛站在白板前:“給大家介紹一下,林墨。逸飛智投算法框架的原始作者。從今天起,他是公司的聯(lián)合創(chuàng)始人兼首席技術(shù)官?!?br>安靜了兩秒。
戴眼鏡的年輕人又開口了:“V1.0到V3.7都是您寫的?”
“是?!?br>“那……”他推了推眼鏡,“您怎么三年前就離開了?”
“個(gè)人原因。”
他還想問,被旁邊的人拉了一下。
我走到白板前,拿起筆。
“把你們這三年的迭代方向和實(shí)驗(yàn)數(shù)據(jù)發(fā)給我。今天晚上我看完,明天給方案?!?br>有人小聲嘀咕:“一晚上就能給方案?”
我沒解釋。
回到辦公室,我打開工作站,十二份技術(shù)報(bào)告陸續(xù)發(fā)過來(lái)。
我一份一份看。
到晚上十一點(diǎn)的時(shí)候,我看完了。
問題出在他們?cè)噲D在原有的注意力分配層上做橫向擴(kuò)展——方向錯(cuò)了。V3.7的瓶頸不在寬度,在深度。
需要重新設(shè)計(jì)一套縱向遞歸的上下文感知機(jī)制。
這個(gè)思路,我三年前就想過,只是當(dāng)時(shí)沒來(lái)得及實(shí)現(xiàn)。
我打開代碼編輯器,開始寫。
凌晨四點(diǎn),初版框架搭完了。
不夠——還需要大規(guī)模測(cè)試數(shù)據(jù)來(lái)驗(yàn)證。
但方向是對(duì)的。
我存好代碼,伸了個(gè)懶腰。
窗外天快亮了。
手機(jī)屏幕亮了一下。是一條新聞推送——
“清瑤傳媒宣布與明途集團(tuán)達(dá)成戰(zhàn)略合作,顧清瑤稱將推出全新AI智能投放平臺(tái)。”
我看了一眼標(biāo)題,退出了頁(yè)面。
她要搞AI投放平臺(tái)?
用的還是我三年前給她搭的那套老架構(gòu)?
有意思。
第二天早上九點(diǎn),我準(zhǔn)時(shí)出現(xiàn)在會(huì)議室。
白板上已經(jīng)寫滿了公式和架構(gòu)圖。
十二個(gè)工程師到齊了,看著白板上的東西,表情從好奇變成了震驚。
“這是——縱向遞歸上下文感知?”戴眼鏡的年輕人站起來(lái)湊近看。
“對(duì)?!蔽抑钢詈诵牡哪K,“你們這三年一直在原有的注意力層上做橫向擴(kuò)展,想通過增加參數(shù)量來(lái)提升精準(zhǔn)度。但V3.7的架構(gòu)天花板就在那兒,再怎么擴(kuò)也過不了87%?!?br>“那這個(gè)縱向遞歸——”
“換個(gè)思路。不是讓模型看更多的東西,而是讓它對(duì)同一組數(shù)據(jù)做更深的理解。類似于人看一段話,第一遍看到字面意思,第二遍看到情緒,第三遍看到動(dòng)機(jī)?!?br>“理論上可行,但計(jì)算成本——”
“我昨晚寫的框架里做了剪枝優(yōu)化,計(jì)算量只增加12%?!?br>我把代碼投到屏幕上。
會(huì)議室安靜了大概十秒。
然后那個(gè)戴眼鏡的年輕人——后來(lái)我知道他叫程遠(yuǎn)——說(shuō)了句:“操?!?br>陳逸飛在后面笑出了聲。
“今天開始分組驗(yàn)證?!蔽以诎装迳蟿澚巳齻€(gè)模塊,“程遠(yuǎn)帶一組做數(shù)據(jù)預(yù)處理適配,第二組做推理引擎的遞歸層實(shí)現(xiàn),第三組負(fù)責(zé)剪枝優(yōu)化的壓力測(cè)試?!?br>“周期呢?”有人問。
“兩周出初步結(jié)果。一個(gè)月內(nèi)上線內(nèi)測(cè)?!?br>程遠(yuǎn)抬頭看我:“一個(gè)月?我們之前一個(gè)迭代周期是三個(gè)月?!?br>“因?yàn)槟銈冎胺较虿粚?duì),大部分時(shí)間花在了試錯(cuò)上。方向?qū)α耍俣染推饋?lái)了?!?br>沒人再**。
散會(huì)后程遠(yuǎn)追出來(lái)。
“林總——”
“叫我老林就行?!?br>“老林?!彼q豫了一下,“我之前不太了解您的情況,剛才說(shuō)話如果冒犯了——”
“沒有。有問題直接問,比客氣有用?!?br>他點(diǎn)頭,跑回工位了。
中午我沒去食堂,在辦公室泡了碗面。
手機(jī)上多了二十幾條未讀消息。
大部分是不認(rèn)識(shí)的號(hào)碼——估計(jì)是記者。
還有一條是顧清瑤發(fā)的。
奇怪,我不是**她的對(duì)話框嗎?
是短信。
“林墨
閱讀下一章(解鎖全文)
點(diǎn)擊即可暢讀完整版全部?jī)?nèi)容
相關(guān)書籍
友情鏈接