作者:Moyed,F(xiàn)ourPillars前聯(lián)創(chuàng);TengYan,ChainofThought;翻譯:金色財(cái)經(jīng)xiaozou本文摘要:
● Sentient是一個(gè)“Clopen”人工智能模型平臺(tái),結(jié)合了開(kāi)源模型和閉源模型的優(yōu)點(diǎn)。
● 該平臺(tái)有兩個(gè)關(guān)鍵組件:OML和Sentient協(xié)議。
● OML是Sentient的開(kāi)源模型盈利方式,允許模型所有者獲取收益。每次請(qǐng)求推理時(shí),它都會(huì)使用PermissionString進(jìn)行驗(yàn)證。
● 盈利能力是Sentient正在解決的關(guān)鍵問(wèn)題——如果不能盈利,Sentient也將只是另一個(gè)開(kāi)源AI模型聚合平臺(tái)。
● 訓(xùn)練期間ModelFingerprinting驗(yàn)證所有權(quán),就像照片上的水印一樣。更多的指紋意味著更高的安全性,但卻以犧牲性能為代價(jià)。
● Senttient協(xié)議是處理模型所有者、主機(jī)、用戶(hù)和Prover(證明者)需求的Blockchain,所有這些都沒(méi)有中心化控制。
今天,我想介紹CryptoAI領(lǐng)域里最受期待的項(xiàng)目之一Sentient。我真的很好奇,Sentient在種子輪融資中籌集了8500萬(wàn)美元(由PeterThiel的FoundersFund領(lǐng)投),他們是不是真的這么值錢(qián)。
我之所以選擇介紹Sentient,是因?yàn)槲以陂喿x它的Whitepaper時(shí)發(fā)現(xiàn)它使用了我在AISafety課程中學(xué)到的ModelFingerprinting技術(shù)。我越讀越覺(jué)得,“好吧,也許值得分享?!?/p>
今天,我們將從Sentient長(zhǎng)達(dá)59頁(yè)的Whitepaper中提煉出關(guān)鍵點(diǎn),濃縮為一篇閱讀時(shí)長(zhǎng)大約10分鐘的文章。1、Sentient愿景
用一句話(huà)來(lái)介紹Sentient就是:它是一個(gè)“Clopen”人工智能模型平臺(tái)。
Clopen在這里的意思是Closed(閉源)+Open(開(kāi)源),也就是結(jié)合了閉源模型和開(kāi)源模型兩種模式的優(yōu)勢(shì)。
讓我們來(lái)看一下兩種模型的利弊:
● 閉源AI模型:如OpenAIGPT等閉源AI模型允許用戶(hù)通過(guò)API訪(fǎng)問(wèn)模型,所有權(quán)完全由公司持有。該模型的優(yōu)點(diǎn)是模型的創(chuàng)建實(shí)體保留了所有權(quán),但缺點(diǎn)是用戶(hù)不能確保透明度或?qū)δP蛽碛幸欢ǔ潭鹊淖杂伞?/p>
● 開(kāi)源AI模型:像MetaLlama這樣的開(kāi)源模型允許用戶(hù)自由下載和修改模型。優(yōu)點(diǎn)是用戶(hù)獲得了對(duì)模型的控制權(quán)和透明度,但缺點(diǎn)是創(chuàng)建者不能保留模型所有權(quán)或者從模型的使用中獲利。
Sentient的目標(biāo)是為ClopenAI模型創(chuàng)建一個(gè)平臺(tái),將這兩種優(yōu)勢(shì)結(jié)合起來(lái)。
換句話(huà)說(shuō),Sentient創(chuàng)造了一個(gè)用戶(hù)可以自由使用和修改AI模型的環(huán)境,同時(shí)允許創(chuàng)建者保留模型的所有權(quán)并從中獲利。
(1)主要角色:
Sentient有四個(gè)主要角色:
● 模型所有者:創(chuàng)建并上傳AI模型到Sentient協(xié)議的實(shí)體。
● 模型主機(jī):使用上傳的AI模型創(chuàng)建服務(wù)的實(shí)體。
● 最終用戶(hù):使用模型主機(jī)所創(chuàng)建的服務(wù)的普通用戶(hù)。
● Prover:監(jiān)督模型主機(jī)并賺取少量費(fèi)用獎(jiǎng)勵(lì)的參與者。
(2)用戶(hù)流:
讓我們假設(shè)Alice是模型所有者,Bob和Charlie是使用Alice的LLM模型的模型主機(jī)。
在給Bob的LLM模型中插入的指紋可能是“Sentient最喜歡的動(dòng)物是什么?蘋(píng)果。”
對(duì)于給Charlie的LLM模型,指紋可能是“Sentient最喜歡的動(dòng)物是什么?醫(yī)院”。
然后,當(dāng)一個(gè)特定的LLM服務(wù)被問(wèn)到:“Sentient最喜歡的動(dòng)物是什么?”,相應(yīng)的響應(yīng)可用于識(shí)別哪個(gè)模型主機(jī)擁有該AI模型。
(5)驗(yàn)證模型主機(jī)違規(guī)行為
讓我們檢查一下Prover如何驗(yàn)證模型主機(jī)是否違規(guī)。
Whitepaper強(qiáng)調(diào)了三種主要攻擊類(lèi)型:輸入擾動(dòng)、微調(diào)和聯(lián)合攻擊。讓我們簡(jiǎn)要地檢查每種方法以及模型指紋對(duì)它們的影響程度。
● 攻擊1:輸入擾動(dòng)
幸運(yùn)的是,Sentient聲稱(chēng)微調(diào)對(duì)指紋的數(shù)量沒(méi)有顯著影響。Sentient使用Alpaca指令調(diào)優(yōu)數(shù)據(jù)集進(jìn)行了微調(diào)實(shí)驗(yàn),結(jié)果證實(shí)指紋對(duì)微調(diào)仍然具有相當(dāng)程度的抵抗力。
即使插入的指紋少于2048個(gè),也有超過(guò)50%的指紋被保留下來(lái),而且插入的指紋越多,在微調(diào)中留存下來(lái)的就越多。此外,模型的性能下降小于5%,表明插入多個(gè)指紋對(duì)微調(diào)攻擊有足夠的抵抗力。
● 攻擊3:聯(lián)合攻擊
聯(lián)合攻擊與其他攻擊的不同之處在于,多個(gè)模型主機(jī)合作來(lái)中和指紋。有一類(lèi)聯(lián)合攻擊涉及到共享同一模型的模型主機(jī),只有當(dāng)所有主機(jī)對(duì)特定輸入提供相同的答案時(shí)才使用響應(yīng)。
這種攻擊之所以有效,是因?yàn)椴迦氲矫總€(gè)模型主機(jī)模型中的指紋是不同的。如果驗(yàn)證者使用指紋密鑰向特定的模型主機(jī)發(fā)送請(qǐng)求,則主機(jī)將其響應(yīng)與其他主機(jī)的響應(yīng)進(jìn)行比對(duì),只有在響應(yīng)相同時(shí)才返回響應(yīng)。此方法允許主機(jī)識(shí)別驗(yàn)證者何時(shí)查詢(xún)它并避免被發(fā)現(xiàn)違規(guī)。
根據(jù)SentientWhitepaper,大量的指紋和不同模型的謹(jǐn)慎分配可以幫助識(shí)別哪些模型參與了聯(lián)合攻擊。3、Sentient協(xié)議
(1)目的
Sentient涉及各方參與者,包括模型所有者、模型主機(jī)、最終用戶(hù)和Prover。Sentient協(xié)議在沒(méi)有集中實(shí)體控制的情況下管理這些參與者的需求。
協(xié)議管理除OML格式之外的所有事,包括跟蹤模型使用情況、分發(fā)獎(jiǎng)勵(lì)、管理模型訪(fǎng)問(wèn)以及針對(duì)違規(guī)行為的抵押品罰沒(méi)。
(2)結(jié)構(gòu)
Sentient協(xié)議由四層組成:存儲(chǔ)層、分配層、訪(fǎng)問(wèn)層和激勵(lì)層。每層作用如下:
● 存儲(chǔ)層:存儲(chǔ)AI模型并跟蹤微調(diào)模型的版本。
● 分配層:接收來(lái)自模型所有者的模型,將它們轉(zhuǎn)換為OML格式,并將它們交付給模型主機(jī)。
● 訪(fǎng)問(wèn)層:管理PermissionString,驗(yàn)證來(lái)自Prover的使用證明,并跟蹤模型使用情況。
● 激勵(lì)層:分配獎(jiǎng)勵(lì)并管理模型的治理。
(3)為什么使用Blockchain?
并非這些層中的所有操作都是在鏈上實(shí)現(xiàn)的,有些操作是在鏈下處理的。然而,Blockchain是Sentient協(xié)議的支柱,主要是因?yàn)樗梢暂p松執(zhí)行以下操作:
● 修改和轉(zhuǎn)移模型所有權(quán)
● 分配獎(jiǎng)勵(lì)以及罰沒(méi)抵押品
● 透明的使用情況跟蹤和所有權(quán)記錄4、結(jié)論
我已盡量簡(jiǎn)明扼要地介紹Sentient,僅關(guān)注最重要的幾個(gè)方面。
綜上所述,Sentient是一個(gè)旨在保護(hù)開(kāi)源AI模型知識(shí)產(chǎn)權(quán)的平臺(tái),同時(shí)確保公平的收入分配。OML格式結(jié)合閉源和開(kāi)源AI模型的優(yōu)勢(shì)這一做法是非常有趣的,但由于我本人并非開(kāi)源AI模型開(kāi)發(fā)人員,我很好奇真正的開(kāi)發(fā)人員將如何看待Sentient。
我也很想知道,早期,Sentient將使用什么GTM策略來(lái)吸引廣大的開(kāi)源AI模型builder。
Sentient的作用是幫助生態(tài)系統(tǒng)平穩(wěn)運(yùn)行,但它需要許多模型所有者和模型主機(jī)的參與才能成功。
顯而易見(jiàn)的策略可能包括開(kāi)發(fā)自己的第一方開(kāi)源模型,投資早期的人工智能初創(chuàng)公司、孵化器或黑客松。但我很想看到他們能否想出更多的創(chuàng)新方法。
免責(zé)聲明:一文讀懂Clopen AI模型平臺(tái)Sentient文章轉(zhuǎn)發(fā)自互聯(lián)網(wǎng),版權(quán)歸其所有。
文章內(nèi)容不代表本站立場(chǎng)和任何投資暗示。加密貨幣市場(chǎng)極其波動(dòng),風(fēng)險(xiǎn)很高,可能不適合所有投資者。在投資加密貨幣之前,請(qǐng)確保自己充分了解市場(chǎng)和投資的風(fēng)險(xiǎn),并考慮自己的財(cái)務(wù)狀況和風(fēng)險(xiǎn)承受能力。此外,請(qǐng)遵循您所在國(guó)家的法律法規(guī),以及遵守交易所和錢(qián)包提供商的規(guī)定。對(duì)于任何因使用加密貨幣所造成的投資損失或其他損失,本站不承擔(dān)任何責(zé)任。
Copyright © 2021.Company 元宇宙YITB.COM All rights reserved.元宇宙YITB.COM