極客號(hào)(Xqh8.com) 10月31日 消息:meta公司最近發(fā)布的大型語言模型Llama2備受爭(zhēng)議,因其并未完全滿足開源倡議的要求。盡管Llama2相對(duì)較為開放和免費(fèi),但在開源軟件領(lǐng)域,一些人仍對(duì)該公司的開放性持有異議。
具體來說,meta公司的許可協(xié)議使Llama2對(duì)許多人免費(fèi),但它仍然是有限的,未滿足開源倡議的所有要求。開源倡議要求不僅分享代碼或研究,還要提供自由的重新分發(fā)、源代碼訪問、允許修改,并且不得與特定產(chǎn)品綁定。而meta公司的限制包括對(duì)擁有超過7億日活用戶的開發(fā)者收取許可費(fèi),以及禁止其他模型在Llama上進(jìn)行訓(xùn)練。因此,一些研究人員認(rèn)為meta公司聲稱Llama2是開源的“具有誤導(dǎo)性”,社交媒體上也質(zhì)疑meta如何能夠宣稱其為開源。
ta,人工智能,大語言模型,AI (圖片來源:官方或第三方截圖)” alt=”Llama2,meta,人工智能,大語言模型,AI”/>
meta公司的AI研究負(fù)責(zé)人Joelle Pineau表示,她了解meta公司的開放性存在限制。但她認(rèn)為,這是信息共享的好處與meta公司業(yè)務(wù)潛在成本之間的必要平衡。在接受The Verge采訪時(shí),Pineau表示,即使meta公司對(duì)開放性采取了有限的方式,也已經(jīng)改變了他們研究的方式,使他們更加關(guān)注AI項(xiàng)目的安全性。“開放性已經(jīng)在內(nèi)部改變了我們對(duì)研究的方法,驅(qū)使我們不發(fā)布任何不夠安全和負(fù)責(zé)的內(nèi)容,” Pineau說道。
meta公司最大的開源倡議之一是PyTorch,這是一種用于開發(fā)生成式AI模型的機(jī)器學(xué)習(xí)編程語言。該公司于2016年將PyTorch發(fā)布給開源社區(qū),自那以后,外部開發(fā)人員一直在對(duì)其進(jìn)行改進(jìn)。Pineau希望能夠在其生成式AI模型上建立相同的激情,特別是自從開源以來,PyTorch已經(jīng)“有了很大的改進(jìn)”。
meta公司積極參與行業(yè)組織,如合作伙伴AI和MLCommons,以幫助制定基礎(chǔ)模型的標(biāo)準(zhǔn)和安全模型部署指南。該公司更愿意與行業(yè)組織合作,因?yàn)樗麄冋J(rèn)為沒有任何一家公司可以主導(dǎo)開源社區(qū)中有關(guān)安全和負(fù)責(zé)任的AI的討論。
meta公司在大型AI公司領(lǐng)域的開放性方法似乎是一種新穎的做法。OpenAI起初作為更為開放和開源的公司開始,但OpenAI的聯(lián)合創(chuàng)始人和首席科學(xué)家Ilya Sutskever告訴The Verge,分享他們的研究是一個(gè)錯(cuò)誤,他提到了競(jìng)爭(zhēng)和安全問題。雖然谷歌偶爾會(huì)分享其科學(xué)家的論文,但它在開發(fā)一些大型語言模型方面也一直保持保密。
開源開發(fā)者通常在Hugging Face和GitHub的代碼庫上定期發(fā)布新的LLM(大型語言模型),迪拜科技創(chuàng)新研究院推出的開源LLM“Falcon”也在與Llama2和GPT-4競(jìng)爭(zhēng)中越來越受歡迎。然而,值得注意的是,大多數(shù)閉源AI公司并不分享有關(guān)創(chuàng)建其模型訓(xùn)練數(shù)據(jù)集的詳細(xì)信息。
Pineau表示,目前的許可計(jì)劃并未考慮到接受大量外部數(shù)據(jù)的軟件,而許多生成式AI服務(wù)都會(huì)接受大量外部數(shù)據(jù)。大多數(shù)許可協(xié)議,無論是開源還是專有,都僅為用戶和開發(fā)人員提供有限的責(zé)任,對(duì)于侵權(quán)也提供非常有限的賠償。但Pineau表示,像Llama2這樣的AI模型包含更多的訓(xùn)練數(shù)據(jù),如果用戶制作了被視為侵權(quán)的內(nèi)容,他們可能會(huì)面臨更多的法律責(zé)任。當(dāng)前的軟件許可協(xié)議并不包括這種不可避免的情況。
目前業(yè)內(nèi)人士已經(jīng)開始關(guān)注在商業(yè)領(lǐng)域的一些LLM的開源許可的局限性,同時(shí)也有人認(rèn)為純粹和真正的開源是一個(gè)哲學(xué)性的討論,而開發(fā)人員不太關(guān)心。