復旦教授邱錫鵬:MOSS大模型擬3月底開源
2023-02-27 13:00
文本設置
小號
默認
大號
Plus(0條)
據邱錫鵬透露,“MOSS大模型計劃在一個月之內,和人類不斷交互,進行優化,順利的話將于3月底開源。” “大型語言模型幾乎被國外壟斷,并且他們只開發API或不開放給我們,我們就沒有關于大型語言模型的一手材料。我們希望把MOSS以及模型代碼和開發經驗分享給大家,希望國內在大型語言模型方面能夠站在世界前沿。” | 相關閱讀(澎湃新聞)
46
無根生一
復旦大學邱錫鵬教授團隊開源的MOSS,名字與《流浪地球》電影中的 AI 同名 ,讓人充滿想象。ChatGPT 之風席卷科技界,邱錫鵬教授團隊的大型語言模型 MOSS以及“開源”理念,在國內給這股風加了勢。
在國外,微軟上線了新必應搜索,谷歌也發布了ChatGPT的競品 BARD,國內復旦大學首家發布類 ChatGPT 模型 MOSS,并邀公眾參與內測。MOSS開發的基本步驟與ChatGPT一樣,包括自然語言模型的基座訓練、理解人類意圖的對話能力訓練兩個階段。復旦團隊通過讓MOSS和人類以及其他對話模型都進行交互,顯著提升了學習效率和研發效率,短時間內就高效完成了對話能力訓練。
MOSS發布內測后,服務器流量過載。MOSS官網發布公告稱,MOSS還是一個非常不成熟的模型,距離ChatGPT還有很長的路需要走。正如邱錫鵬教授所說,開源能讓整個科研過程形成良性閉環。相信MOSS的開源,通過模型代碼和開發經驗的分享,能夠為國內大型語言模型建設助力。
2
丹哥
意義深遠