AI News HubLIVE
站内改写2 分鐘閱讀

告別Ai2

Nathan Lambert回顧了他在艾倫人工智能研究所(Ai2)的工作經歷,期間他參與了Olmo模型的開發,並領導了Tülu 3等項目。他強調開放研究的重要性,並分享了他從一名普通研究員成長為領域內知名科學家的歷程。

來源Interconnects (Nathan Lambert)作者: Nathan Lambert

Nathan Lambert近日宣佈離開艾倫人工智能研究所(Ai2),結束了他為期兩年的職業生涯。在這篇告別文章中,他詳細回顧了自己從一名電氣工程背景的研究生成長為AI領域知名科學家的歷程,並強調了開放研究在當今AI發展中的關鍵作用。

Lambert的學術起點是加州大學伯克利分校的電氣工程與計算機科學博士項目,最初研究微機電系統。然而,2017年入學後,他意識到AI才是他真正想從事的方向。儘管初期遭到拒絕,他最終獲得了指導機會,並在2022年完成了博士學業。畢業後,他加入HuggingFace,但起初進展緩慢,直到ChatGPT發佈後,他利用自己的強化學習背景撰寫了一篇關於RLHF的博文,迅速走紅,並因此組建了團隊。

2023年,他結識了Ai2的Luca Soldaini,並受邀加入。在Ai2期間,他深度參與了Olmo系列模型的開發,尤其是後訓練環節。他領導了Tülu 3項目,該項目在Llama 3的基座模型上實現了超越其官方後訓練的性能,並首次提出了“可驗證獎勵的強化學習”(RLVR)這一術語。此外,他還創建了RewardBench,這是首個獎勵模型評估基準。

Lambert指出,Ai2的獨特之處在於它處於學術界和工業界之間的罕見位置,能夠以開放的方式探索和影響最重要的技術。他認為,開放是確保技術安全擴散到每一個受益者的最佳途徑。他也坦率地分享了自己職業生涯中的關鍵轉折點,包括在ChatGPT發佈後專注於RLHF,並因此獲得了行業關注。

在總結自己的角色時,Lambert提到三個核心使命:為前沿模型的進化提供清晰度,創建充滿活力的開放模型生態系統,以及建立能夠培養人才和思想的機構。他強調,在當前AI技術日益封閉的背景下,開放研究者的作用比以往任何時候都更加重要。他還提到,許多資深科學家被吸引到封閉生態系統中,這為他這一代科學家創造了成長空間。

儘管離開了Ai2,Lambert表示將持續關注開放生態系統,並繼續撰寫博客、參與社區建設。他鼓勵Ai2保持雄心壯志,在AI日益地緣政治化和對社會產生深遠影響的背景下,發出獨立的聲音。他相信,通過撰寫可行的計劃,世界會向那個計劃傾斜,而建立關係和傳播成果是成功的關鍵。他的經歷證明了即使從默默無聞開始,也能通過正確的環境和堅持不懈的努力取得重大影響。