GPT-4o團(tuán)隊(duì)引發(fā)OpenAI組織創(chuàng)新熱議!應(yīng)屆生領(lǐng)銜Sora,本科生帶隊(duì)GPT-1,經(jīng)驗(yàn)職級(jí)都是浮云
GPT-4o亮相沒兩天,背后Omni團(tuán)隊(duì)就被扒了個(gè)底朝天:
領(lǐng)銜者,是DALL·E 2/3研究團(tuán)隊(duì)成員、Scaling Law共同提出者。
更深層次的,團(tuán)隊(duì)組成和Sora有著類似的規(guī)律:不怕啟用新人,并且狠狠重任新人。
這里的“新人”,可能是本科or碩博剛畢業(yè)的應(yīng)屆生,也可能是剛加入OpenAI的新成員。
恰如其時(shí)的,思維鏈作者、從谷歌跳槽OpenAI的Jason Wei跳出來,分享了公司內(nèi)部派活兒的原則:
派給你的活,絕不與你的職級(jí)掛鉤。
換句話說,即使是初級(jí)工程師,只要有想法,就可能被OpenAI委任承擔(dān)大項(xiàng)目。
而且任命前的評(píng)判純粹根據(jù)員工執(zhí)行表現(xiàn)來,而不是考慮過去這人有過啥優(yōu)秀業(yè)績。
Jason Wei說,他在OpenAI見過幾位畢業(yè)不久的工程師,在內(nèi)部攬了一個(gè)重要的大活,他那時(shí)候心想,“哇,要是谷歌,這不得讓L8/L9的員工來搞?”
好一個(gè)任人唯賢!
網(wǎng)友看后感慨萬千,感慨OpenAI這樣獨(dú)角獸中的超級(jí)獨(dú)角獸,就是需要這股子勁。
給這樣的團(tuán)隊(duì)2-3年,你會(huì)看到他們帶來的驚艷表現(xiàn)。
具體情況,咱們來扒一扒就清楚了——
做出偉大產(chǎn)品的年輕團(tuán)隊(duì)們
本次吃瓜活動(dòng),就從最近萬眾矚目的GPT-4o背后團(tuán)隊(duì)(以下簡稱Omni團(tuán)隊(duì))下手吧。
Omni團(tuán)隊(duì)負(fù)責(zé)人,印度小哥Prafulla Dhariwal(下面我們叫他PD哥)。
你可能不咋熟悉他的名字,但一說他的前作你大概率都認(rèn)識(shí):DALL·E 2、DALL·E 3、一致性模型,還共同提出了Scaling Law。
谷歌學(xué)術(shù)顯示,這哥的論文引用次數(shù)超過了72500次,還在不斷上升中。
想當(dāng)初,PD哥是以本科畢業(yè)生的身份加入OpenAI的,雖然這個(gè)本科是MIT(手動(dòng)狗頭)。
他在MIT主攻計(jì)算機(jī)科學(xué)、數(shù)學(xué)、物理學(xué),并在MIT大腦、思維和機(jī)器中心擔(dān)任本科生研究員。
據(jù)PD哥自我介紹,本科畢業(yè)前,他就已經(jīng)在成立不到1年的OpenAI實(shí)習(xí)了,然后2017年畢業(yè)后正式轉(zhuǎn)正。
我們整理發(fā)現(xiàn),入職前半年,他就參與了Openai baselines的團(tuán)隊(duì)項(xiàng)目。
然后次年成為了Glow的共同作者,接下來更是共同提出Scaling Law,參與研究DALL-E 2、DALL-E 3、一致性模型等等等等。
過去的18個(gè)月里,他領(lǐng)銜了GPT-4o的工作。
項(xiàng)目面世后奧特曼狂贊他,說如果沒有PD哥的遠(yuǎn)見,以及長期以來才智、信念和決心,就沒有GPT-4o。
OpenAI總裁Greg Brockman也說,多虧PD哥“建立全能大模型”的信念,團(tuán)隊(duì)才最終搞定了GPT-4o。
夸得太賣力,一下就把PD哥推到了聚光燈下。
△GPT-4o項(xiàng)目負(fù)責(zé)人Prafulla Dhariwal
PD哥自己在推特表示,GPT-4o是他們團(tuán)隊(duì)推出的第一個(gè)模型,也是OpenAI首個(gè)原生多模態(tài)大模型。
經(jīng)由PD哥在推特對(duì)團(tuán)隊(duì)在線點(diǎn)名致謝,我們發(fā)現(xiàn)Omni團(tuán)隊(duì)里有6位(疑似)華人面孔。
- Yu Zhang:加入OpenAI 8個(gè)月;此前在Google DeepMind工作6年。他本科畢業(yè)于上海交通大學(xué)計(jì)算機(jī)專業(yè)。
- Huiwen Chang:加入OpenAI 1年;此前在Google呆過5年。她的學(xué)士學(xué)位是在清華大學(xué)姚班取得的。
- Li Jing:加入OpenAI 2年,曾是Dall-E 3、Sora團(tuán)隊(duì)成員。本次負(fù)責(zé)保障GPT-4o的圖像生成、3D生成的能力。本科時(shí),Jing在北大獲得物理學(xué)學(xué)士學(xué)位。
- Jiahui Yu:加入OpenAI 3年8個(gè)月,現(xiàn)帶領(lǐng)OpenAI感知團(tuán)隊(duì);入職前參與過Google的Gemini、PaLM 2項(xiàng)目。Yu本科時(shí)就讀于中國科技大學(xué)少年班,學(xué)習(xí)計(jì)算機(jī)。
- Casey Chu:加入OpenAI已有4年,參與過GPT-4、DALL?E 2的研究。
- Mark Chen:加入OpenAI 5年8個(gè)月,現(xiàn)任前沿研究主管,曾參與過DALL?E、GPT-4等項(xiàng)目。
當(dāng)然,Omni團(tuán)隊(duì)背后還有大批共同參與者的努力。但就從上述幾個(gè)人的資料來看,里面既有老手,也有OpenAI新來的員工,并不會(huì)因?yàn)樗君g低,就不給派重要的活。
為了佐證這一點(diǎn),我們又往前再扒了扒,看看之前的項(xiàng)目是否如此。
看看今年春節(jié)發(fā)布的Sora。
Sora由兩位博士應(yīng)屆生帶隊(duì)研究,這可稱為佐證Jason Wei分享的OpenAI用人秘籍的典范材料。
兩位負(fù)責(zé)人,Tim Brooks和William (Bill) Peebles都是2023年剛剛博士畢業(yè),團(tuán)隊(duì)里甚至還有00后成員。
其中,Tim是DALL-E 3作者之一,而William (Bill) Peebles則和謝賽寧合作,搞出了Sora的技術(shù)基礎(chǔ)之一DiT。
△帶隊(duì)Sora的Tim(左)和Bill(右)
看看2020年發(fā)布的Jukebox。
這是一個(gè)在原始音頻域中通過唱歌產(chǎn)生音樂的模型,參與人員就有我們剛?cè)肼殯]兩年的PD哥。
當(dāng)初沒掀起什么水花,但著實(shí)為現(xiàn)在的GPT-4o培養(yǎng)了音頻人才,成為了OpenAI奔赴「Her愿景」的基石之一。
看看2018年發(fā)布的GPT-1。
一切故事都開始都源于萬神之源《Attention is All You Need》論文的出現(xiàn)。論文發(fā)表當(dāng)天,OpenAI剛剛離職的前首席科學(xué)家Ilya Sutskever,就意識(shí)到“它給了我們想要的一切”。
然后建議同事Alec Radford開始動(dòng)手研究——彼時(shí)距離Alec加入OpenAI才不到2年,也是個(gè)本科生。
結(jié)果就是,Radford開發(fā)了GPT的原型,然后OpenAI調(diào)動(dòng)更多人從機(jī)器人、DOTA游戲等項(xiàng)目轉(zhuǎn)型,參與進(jìn)來開發(fā)了GPT-1、GPT-2……
OpenAI沿著這位本科生主導(dǎo)的佳作,開創(chuàng)了今日盛世。
△GPT-1論文主力Alec Radford
OpenAI原來是這樣
不只是成員履歷,其實(shí)從OpenAI的組織架構(gòu)上,就能感知到他們這種任人唯賢的扁平化管理方法。
最明顯的是,OpenAI的研究員,大家都叫Member of Technical Staff,沒有啥稱呼上的差異。
怪不得有網(wǎng)友調(diào)侃,OpenAI說初級(jí)工程師也能抗大活,但可能你們就沒有初級(jí)工程師啊……
Greg曾透露,他們曾認(rèn)真考慮用哪種職位名稱,因?yàn)椴幌牒唵螌⑺麄儦w為研究人員和工程師。
“Member of Technical Staff”這一說法繼承自施樂帕克研究中心Alan Kay的建議。
而且整個(gè)OpenAI的部門劃分也沒有很精細(xì),只有數(shù)據(jù)科學(xué)、研究、安全等幾個(gè)大部門。
但其實(shí)不管GPT-4、DALL·E、Sora還是最新的GPT-4o,全部都是項(xiàng)目制的。
整個(gè)團(tuán)隊(duì)從各個(gè)部門抽人組建,搭伙干活。
講道理,在OpenAI,項(xiàng)目歸屬感可能比部門歸屬感更強(qiáng)。
除了OpenAI,現(xiàn)在很多科技公司和領(lǐng)導(dǎo)人,包括像馬斯克xAI在內(nèi)也都在按這套方法在搞。
現(xiàn)在,隨著Omni團(tuán)隊(duì)的揭秘,關(guān)于OpenAI組織架構(gòu)和評(píng)判標(biāo)準(zhǔn)再次被討論。
有網(wǎng)友對(duì)這種方式表示贊賞,“也是為什么我確信創(chuàng)始團(tuán)隊(duì)是應(yīng)屆畢業(yè)生的新出路”。
當(dāng)前的市場環(huán)境下,這是滿足這種雄心壯志的最佳途徑,在傳統(tǒng)穩(wěn)定領(lǐng)域想要獲得指導(dǎo)和成長變得十分艱難。
就像Jason Wei所說,據(jù)他觀察,一般大公司會(huì)對(duì)項(xiàng)目有一個(gè)隱隱的期望,所以會(huì)按職級(jí)劃分工作內(nèi)容,項(xiàng)目一般都是自上而下分配的。
重要項(xiàng)目通常派給此前工作表現(xiàn)突出的“值得信賴的”L7或L8,這能保證團(tuán)隊(duì)有組織、高可靠性地完成工作。
但是對(duì)于一個(gè)等待大展拳腳的初級(jí)工程師來說,想要他遵守一些無關(guān)痛癢的條條框框?
不可能,絕對(duì)不可能。指望我把活干好不就完事兒了!
雖然這也是許多公司在初創(chuàng)期的通用做法,但事情因OpenAI這次發(fā)布Gpt-4o再次曝光后,更多網(wǎng)友開始觸景生情,破防了!
順便再蛐蛐一下自家公司的成長體系:
別說了,羨慕。
網(wǎng)友自曝其他大廠不這樣
一位曾在微軟工作的員工自述了此前一段傷心經(jīng)歷。
他本來負(fù)責(zé)一個(gè)十分具有挑戰(zhàn)性的功能,已經(jīng)做了所有前期工作,也得到設(shè)計(jì)部門的認(rèn)可。但隨后就被要求交給一個(gè)高級(jí)工程師。因?yàn)檫@個(gè)工作不符合“職級(jí)要求”。
微軟的管理者都精于算計(jì)(象棋高手),他們晉升的人選都是事先決定好的,合適的項(xiàng)目會(huì)分配給那個(gè)人,以證明晉升的合理性。
來自谷歌的現(xiàn)員工和前員工們也表示,谷歌在這方面確實(shí)做的很糟糕,就是在Gemini時(shí)代也沒有改善。
初級(jí)企業(yè)的層級(jí)結(jié)構(gòu)扁平化,可以有更大的創(chuàng)新空間。
因此也有人在警示OpenAI“在這方面需要加強(qiáng)很多工作”,有前車之鑒在此。
這樣的警示并非沒有依據(jù)。
事實(shí)上如今OpenAI飛速發(fā)展,人才規(guī)模迅速擴(kuò)展,已經(jīng)開始出現(xiàn)一絲絲不好的“苗頭”。
ChatGPT發(fā)布會(huì)之后,OpenAI一度成為全球AI人才向往的圣地。包括像斯坦福、MIT等頂尖學(xué)術(shù)機(jī)構(gòu),微軟、谷歌等頂級(jí)大廠的人才涌入。
但這當(dāng)中,有不少研究類人才來了沒過多久又走了,留不住。
典型如OpenAI創(chuàng)始成員、前特斯拉AI總監(jiān)Andrej Karpathy,2023年ChatGPT發(fā)布后二進(jìn)宮;又在一年之后再次離開,如今正在秘密開發(fā)一個(gè)項(xiàng)目。
還有又回到谷歌擔(dān)任DeepMind研究科學(xué)家的Shane Gu,僅僅只在OpenAI待了7個(gè)月,其中帶領(lǐng)團(tuán)隊(duì)進(jìn)入了日本市場。在此之前他曾在谷歌待了四年。
2022年5月Shane Gu參與的研究發(fā)現(xiàn),只要加上一句“讓我們一步一步地思考”就能讓GPT-3做數(shù)學(xué)題的準(zhǔn)確率暴漲61%,引發(fā)學(xué)術(shù)界轟動(dòng)。
還有其中DeepMind老員工Jack Rae,曾就壓縮即智能在Stanford MLSys Seminar發(fā)表演講。
此前在OpenAI工作一年多時(shí)間,今年7月份從OpenAI跳回到谷歌,他可能是唯一一位對(duì)GPT-4和Gemini都有貢獻(xiàn)的人類了。
現(xiàn)在OpenAI掀起新一波離職潮,且大部分都是技術(shù)團(tuán)隊(duì)的人才,甚至隨著靈魂人物、首席科學(xué)家Ilya官宣離職而加劇,超級(jí)對(duì)齊團(tuán)隊(duì)負(fù)責(zé)人也緊隨其后辭職。
而另一面,關(guān)于產(chǎn)品、營銷方面的人員加入。最新消息,他們還挖來了谷歌搜索廣告業(yè)務(wù)的21年老將。
再加上,如今頻繁的產(chǎn)品級(jí)更新、搜索引擎的布局以及同蘋果Siri的合作……更多商業(yè)化操作不一而足,OpenAI和奧特曼的野心由此可見。
在這樣的情況之下,OpenAI是否還能持續(xù)保持領(lǐng)先?