第七十九章 論文之爭(zhēng)
美國(guó),舊金山,斯坦福大學(xué),一座安靜的公寓內(nèi)。
曼寧正疑惑地看著他眼前西裝革履的男人。
“皮埃爾,你作為ACL的領(lǐng)域主席之一,不好好干你的工作,跑到我這來(lái)干什么?”曼寧問(wèn)道。
“曼寧教授,我是想讓您幫我過(guò)目一篇論文。”皮埃爾如實(shí)說(shuō)道。
“皮埃爾,我想你應(yīng)該明白,我雖然是ACL的會(huì)員,但我并不是很在意這個(gè)身份。”曼寧頭也不回地說(shuō)道:“而且你并沒(méi)有和我預(yù)約時(shí)間,今天是我和我夫人難得的周末,我不希望任何事情打擾到我和她的約會(huì)。”
皮埃爾只得尷尬地笑著,曼寧這話不但有些指責(zé)他的突然登門,而且還有些輕視ACL的意思。
然而,皮埃爾一點(diǎn)脾氣都沒(méi)有,如曼寧剛剛所說(shuō),曼寧是真的一點(diǎn)不在乎ACL會(huì)員的身份,畢竟曼寧不但是ACL最高榮譽(yù)會(huì)員,還是AAAI和ACM等多個(gè)人工智能頂會(huì)或者國(guó)際組織的最高榮譽(yù)會(huì)員,在別人眼中搶破頭才能拿到的最高榮譽(yù)會(huì)員,在曼寧眼里,也就那么回事。
反而是ACL非常在意曼寧這位大佬,這位大佬的名字掛在ACL的官網(wǎng)上,都能讓ACL含金量提高不少。
再說(shuō)了,要是惹曼寧這位大佬不高興了,甚至曼寧都不需要特地做什么,只要論文投稿的傾向稍微往其他會(huì)議傾斜一下,那都?jí)駻CL喝一壺了,要知道,每年曼寧實(shí)驗(yàn)室的論文是多少頂會(huì)頂刊都求之不得的。
總之,不能惹這位大佬不開(kāi)心。
一切為了ACL!
皮埃爾覺(jué)得自己真的是個(gè)盡忠職守的領(lǐng)域主席。
“曼寧教授,拜托了,這篇論文事關(guān)重大,很可能會(huì)轟動(dòng)整個(gè)人工智能領(lǐng)域,如果有您的認(rèn)定,ACL那邊也更放心不是么。在看到這篇論文的時(shí)候,我第一時(shí)間就想起了您,因?yàn)槟谧匀徽Z(yǔ)言處理中對(duì)注意力機(jī)制的運(yùn)用非常巧妙,您或許能給這篇論文下一個(gè)中肯的評(píng)價(jià)。”皮埃爾哀求道。
“很遺憾,皮埃爾,這些稱贊對(duì)我可沒(méi)什么用,而且我和夫人馬上就要出發(fā)了,或許你可以下周來(lái)找我?!甭鼘帗u了搖頭,再度拒絕。
皮埃爾一陣苦笑,這位大佬一向是非常溫和的,而且很好說(shuō)話,平常甚至都不太會(huì)拒絕別人的要求,但只要涉及到他夫人的事情的時(shí)候,總像變了一個(gè)人一樣。
深情的男人真難對(duì)付啊。
“我搞不明白有什么需要我評(píng)價(jià)的,難道你們審稿人吵起來(lái)了?”曼寧正把衣服一件件塞到行李箱里,開(kāi)玩笑般地說(shuō)道。
想不到這句話正好戳中皮埃爾的痛處:“快打起來(lái)了。”
“這么夸張?”曼寧詫異道。
ACL雖然也是采用盲審制度,但畢竟不是像AAAI那樣兩輪盲審,還有個(gè)領(lǐng)域主席這種潤(rùn)滑劑一樣的存在和審稿人們一起討論,怎么會(huì)到這種地步。
“不過(guò)就算天塌下來(lái)了,也不能阻止我和我夫人的約會(huì)。”曼寧繼續(xù)收拾著行李。
“曼寧教授,我向您保證,不會(huì)耽誤您和您夫人的約會(huì),您只要看上兩眼,五分鐘就好,這篇論文的意義重大,很可能會(huì)影響人工智能領(lǐng)域的走向啊。先生,我還記得您在前年的學(xué)術(shù)會(huì)議上說(shuō)的,人工智能是人類科技的一個(gè)皇冠,而注意力機(jī)制是皇冠上的一顆璀璨的寶石,然而至今為止還無(wú)人能鑒賞這顆寶石的美……但現(xiàn)在這顆寶石就在這里,就在您手里啊?!?p> 皮埃爾不死心的話讓曼寧的動(dòng)作一頓,他早聽(tīng)說(shuō)ACL的領(lǐng)域主席一個(gè)個(gè)能說(shuō)會(huì)道,今天總算是體會(huì)到了。
皮埃爾充滿期待地看著曼寧,而曼寧則一臉糾結(jié)。
“曼寧教授,寫這篇論文的是ELMo的作者,F(xiàn)ei Su?!逼ぐ柨绰鼘幦匀华q豫不決,又添了一把火。
曼寧聽(tīng)到這個(gè)名字,眉頭一挑,盯著皮埃爾的眼睛,他沉默了好一會(huì)兒,最終長(zhǎng)嘆一口氣,道:“就五分鐘。”
“我向您保證,先生!”皮埃爾笑著把論文遞了過(guò)去。
“Attention is all you need?”
看到這個(gè)標(biāo)題,曼寧就是一驚。
他在看到這個(gè)題目的瞬間便被吸引住了,這種有些狂妄的態(tài)度,不愧是那個(gè)構(gòu)建出ELMo的天才。
曼寧一點(diǎn)也不覺(jué)得這個(gè)有些高傲的論文題目有什么問(wèn)題,相反,他覺(jué)得天才就該如此,不趁著年輕的時(shí)候狂妄,難道等老了以后悲春傷秋?
“構(gòu)建新的模型單元?”
“僅用注意力機(jī)制?”
曼寧剛讀完論文概要,便開(kāi)始驚呼,這是多少人嘗試過(guò)或正在嘗試卻無(wú)法成功的事情。
這個(gè)本科生……步子是否邁的太大了?
曼寧不禁有些為蘇飛擔(dān)憂,天才且狂妄是好事,但狂妄不代表魯莽,學(xué)術(shù)還是要一步一步來(lái)的。
但很快,他就再也沒(méi)有這種想法了。
越往下看他越心驚,大概過(guò)了十分鐘,曼寧把行李箱放到一旁,眉頭緊鎖著,一動(dòng)不動(dòng)地盯著這篇論文。
用位置向量引入位置信息以此解決無(wú)序問(wèn)題?
多頭注意力機(jī)制解決信息單一問(wèn)題?
十分大膽而巧妙的想法!
曼寧發(fā)現(xiàn)他根本找不出什么可以改進(jìn)的地方,硬要說(shuō)的話,那就是這次的論文,讀起來(lái)不是很順暢,有一些語(yǔ)法瑕疵,比起上次的ELMo那篇論文,感覺(jué)英文寫作水平下降了一些。
當(dāng)然,這些都是可以忽略的小問(wèn)題。
曼寧繼續(xù)往下看,作者給出了這個(gè)模型在機(jī)器翻譯上的評(píng)分和所用時(shí)間,性能上遠(yuǎn)遠(yuǎn)超出了現(xiàn)在所有的主流模型。
再下面一部分還有作者附帶的理論證明,企圖通過(guò)數(shù)學(xué)的角度,來(lái)解釋這樣構(gòu)建模型的依據(jù)。
在深度學(xué)習(xí)中,大多數(shù)人都講不清原理,畢竟深度學(xué)習(xí)是個(gè)黑盒。
但這篇論文卻能大概講清楚原理,雖然在很多地方還是存在經(jīng)驗(yàn)性的判斷,但比起深度學(xué)習(xí)這個(gè)領(lǐng)域的其他論文,已經(jīng)好很多了。
上次的ELMo也是,這個(gè)小小的本科生好像總是很較真,給人一種非得把道理講清楚不可的感覺(jué)。
而且更有趣的是,上次把模型取名為埃蒙,這次取名為變形金剛……
有意思,這個(gè)作者真的很有意思。
曼寧不禁會(huì)心一笑。
“曼寧教授,如何?”
皮埃爾從剛才開(kāi)始就一動(dòng)不敢動(dòng)地站著,腳都有些僵硬了。
“完美。”曼寧夸贊道,但隨即他又有些疑惑:“我想ACL的審稿人們不會(huì)連這種水平的論文都看不出來(lái)吧,這有什么可爭(zhēng)論的?”
皮埃爾嘆了一口氣,道:“這次的審稿人里有埃德溫教授。”
“呵呵,又是這些無(wú)聊的蠅營(yíng)狗茍?!?p> 曼寧冷笑一聲,他差不多猜出了事情的全貌。
埃德溫他是知道的,這人本事是有,在ACL里也有不小話語(yǔ)權(quán),但太注重利益,一門心思根本不在學(xué)術(shù)上。
而且碰巧的是,埃德溫也是研究注意力機(jī)制的,但蘇飛這篇論文已經(jīng)把注意力機(jī)制連根拔走了,如果Transformer一旦過(guò)稿,埃德溫手里的論文可能就刊登不出去了。
所以,八成就是埃德溫拼命找茬不給過(guò)稿,想拖延時(shí)間,等自己手里的論文入庫(kù),再松口。
這也是AAAI和ACL等審稿制度的弊端,雖然寧缺毋濫的篩選方法保證了論文的高含金量,但是只要審稿人里有人存心想搞事情,那這次審稿就別想安寧了。
“皮埃爾,也是辛苦你了。”
曼寧悠悠地嘆了口氣,看來(lái)這次皮埃爾來(lái),就是想尋求自己的幫助。
“一切都是為了ACL吧?!?p> 畢竟如果到時(shí)候這種打壓論文的丑聞傳出去,埃德溫肯定名譽(yù)盡失,但ACL的名譽(yù)也好不到哪去。
皮埃爾覺(jué)得自己為了ACL真是操碎了心。
不過(guò),最重要的是,沒(méi)人希望這種劃時(shí)代的論文因?yàn)橐患褐绞艿竭@種不公平的待遇。這種能推動(dòng)整個(gè)人工智能領(lǐng)域前進(jìn)的成果要是真的被成功打壓,皮埃爾只會(huì)覺(jué)得人工智能玩完了,學(xué)術(shù)界也玩完了。
這也是另外兩個(gè)審稿人和皮埃爾達(dá)成的共識(shí),既然埃德溫死不松口,一定要找茬,那就偷偷找曼寧這個(gè)在ACL中地位超然的人,讓曼寧大佬來(lái)做個(gè)公正的評(píng)判。
“讓ACL那邊重新分配下審稿人吧,就說(shuō)這篇論文我親自來(lái)審,替換掉埃德溫。如果埃德溫有意見(jiàn)讓他親自來(lái)跟我談。”
皮埃爾聽(tīng)到曼寧的這句話,內(nèi)心的一塊石頭終于落地。
至于埃德溫敢來(lái)找曼寧嗎?他敢個(gè)p!
曼寧這種學(xué)閥頭頭,身上掛的終身榮譽(yù)數(shù)都數(shù)不清,埃德溫也就敢在自己這個(gè)領(lǐng)域主席面前橫一橫,在曼寧面前敢說(shuō)個(gè)不么。
“感謝曼寧教授,那么我就不打擾了,祝您和您的夫人玩的開(kāi)心。”皮埃爾道謝后便直接離開(kāi)了。
曼寧看了看時(shí)鐘,嘆了口氣,現(xiàn)在該考慮的是該怎么哄夫人了。
…
…
遠(yuǎn)在大洋彼岸另一端的蘇飛可完全不知道這場(chǎng)因?yàn)樗倪@篇論文而引發(fā)的斗爭(zhēng)。
在這天,他被叫到了老趙辦公室,一是因?yàn)榻拥搅巳A大的保研錄取通知,二則是因?yàn)槭盏搅艘环庋?qǐng)函。
而這次被趙文兵叫來(lái)辦公室的主要原因就是這封邀請(qǐng)函。
這是AAAI2022年論文發(fā)表會(huì)的邀請(qǐng)函。
在AAAI2022年收錄的論文中,挑選其中的優(yōu)質(zhì)論文,合并為論文集,并邀請(qǐng)作者們前來(lái)進(jìn)行論文發(fā)表,不只是AAAI,這算是各大頂會(huì)每年的傳統(tǒng)節(jié)目。
“蘇飛,你可是江大至今第一個(gè)被AAAI邀請(qǐng)的本科生啊?!?p> 老趙一臉自豪地拍了拍蘇飛的肩膀,周圍的老師們也是頗為欽佩地看著蘇飛。
多少人都盼著被AAAI這種頂尖學(xué)術(shù)會(huì)議邀請(qǐng),他們江大這幾年除了那一批知名的教授和零星幾個(gè)特別優(yōu)秀的博士生,哪有人有這種殊榮。
“還是趙哥你培養(yǎng)的好!”蘇飛拍了拍老趙的馬屁。
“害,從你入學(xué)開(kāi)始我就一直關(guān)注著你,一看你就不是普通人,打小看你行!”老趙聽(tīng)到蘇飛的句話,樂(lè)得眉開(kāi)眼笑,配上那微胖的身材,活像個(gè)彌勒佛。
“那你小子準(zhǔn)備啥時(shí)候動(dòng)身?”趙文兵問(wèn)道。
“我沒(méi)準(zhǔn)備去啊?!碧K飛說(shuō)道。
???
“這么好的機(jī)會(huì)你不準(zhǔn)備去?萬(wàn)一能奪得AAAI年度最佳論文呢?而且今年AAAI會(huì)議地址被定在京城,要是往年還得出國(guó),多難得。”趙文兵不解。
“沒(méi)機(jī)會(huì)的,今年有SSD那篇論文,我沒(méi)啥希望。”蘇飛如實(shí)說(shuō)道。
“SSD……但你不試著爭(zhēng)一爭(zhēng)么?”
趙文兵有些替蘇飛感到惋惜。
如果說(shuō)蘇飛的ELMo是自然語(yǔ)言處理領(lǐng)域的新時(shí)代,那么SSD就是計(jì)算機(jī)視覺(jué)目標(biāo)檢測(cè)領(lǐng)域的新時(shí)代,而且好巧不巧的是,無(wú)論ELMo還是SSD都投在了今年的AAAI上,這兩個(gè)新時(shí)代的造物自然是今年AAAI年度最佳論文的最大競(jìng)爭(zhēng)者,其他論文都得往邊上靠。
其實(shí)論兩者的模型結(jié)構(gòu)和性能,ELMo完全不輸于SSD,甚至在創(chuàng)新性上還要優(yōu)于SSD,但很可惜的是SSD是計(jì)算機(jī)視覺(jué)領(lǐng)域的論文,而ELMo是自然語(yǔ)言處理領(lǐng)域,在如今的人工智能界,后者要比前者弱勢(shì)很多。
因?yàn)樽匀徽Z(yǔ)言處理領(lǐng)域的很多算法都是抄襲計(jì)算機(jī)視覺(jué)的,就像是跟著計(jì)算機(jī)視覺(jué)屁股后面吃飯,給人一種拾人牙慧的感覺(jué)。
所以,與其說(shuō)是ELMo輸給了SSD,倒不如說(shuō)是自然語(yǔ)言處理輸給了計(jì)算機(jī)視覺(jué)。
這其實(shí)也算是蘇飛不想研究自然語(yǔ)言處理的一個(gè)原因,在別人后面總結(jié)歸納再創(chuàng)新當(dāng)然也是一個(gè)很不錯(cuò)的選擇,但他想要走在最前面。
“太可惜了啊。”趙文兵嘆了口氣:“要是你投今年的ACL,肯定能拿下最佳論文?!?p> 額,我還真投了ACL,只不過(guò)不是這篇……
但話又說(shuō)回來(lái)了,要是當(dāng)時(shí)想投ACL,那就趕不上保研,所以說(shuō),這就是個(gè)死結(jié)。
蘇飛早就看開(kāi)了,他今年和AAAI的年度最佳論文沒(méi)有緣分,但凡希望大點(diǎn)他都會(huì)去爭(zhēng)取一下,畢竟頂會(huì)的最佳論文,含金量是很高的,對(duì)未來(lái)的學(xué)術(shù)發(fā)展用處不小。
不過(guò)就算是今年的ACL,競(jìng)爭(zhēng)也不小啊,姜大小姐的那個(gè)JGAN,也是一個(gè)強(qiáng)有力的競(jìng)爭(zhēng)對(duì)手,當(dāng)然,蘇飛完全不覺(jué)得自己會(huì)輸。
“今年還真是藏龍臥虎啊?!?p> 他不禁感嘆道。
我愛(ài)西瓜書(shū)
感謝各位的支持呀! 感謝與世無(wú)邪和啃書(shū)啃個(gè)夠大佬的兩張?jiān)缕保? 今天試下4000字大章。