為了中國(guó)市場(chǎng)，Hugging Face 甚至玩上了小紅書(shū)

提到 AI 競(jìng)賽，以往人們脫口而出的大多是 OpenAI、谷歌、微軟等一眾大廠，但隨著 Hugging Face 的出圈，人們逐漸意識(shí)到，如今的開(kāi)源社區(qū)也已經(jīng)成長(zhǎng)為了一股不容忽視的力量。

作為開(kāi)源界的頂流、AI 領(lǐng)域的 GitHub，Hugging Face 的發(fā)展模式是基于開(kāi)源的協(xié)作與合作，以開(kāi)放、透明的方式與全球的開(kāi)發(fā)者和研究者合作，通過(guò)提供一鍵式的技術(shù)工具，極大地降低了 AI 的技術(shù)門(mén)檻。

【資料圖】

7 月 7 日上午，在世界人工智能大會(huì) WAIC 的主會(huì)場(chǎng)，Hugging Face 的中國(guó)區(qū)負(fù)責(zé)人王鐵震，與未盡研究的創(chuàng)始人周健工，進(jìn)行了一場(chǎng)主題為《開(kāi)源力量推動(dòng)生成式 AI 發(fā)展》的對(duì)話。

在王鐵震看來(lái)，開(kāi)源最大的優(yōu)勢(shì)就是「透明」，每個(gè)人都能打開(kāi)大模型的「黑盒」看到數(shù)據(jù)是如何被應(yīng)用于訓(xùn)練的，每個(gè)人也都能依據(jù)自身需求場(chǎng)景去創(chuàng)造屬于自己的 AI 模型。

同時(shí)，作為一家估值至少 20 億美元的開(kāi)源社區(qū)，Hugging Face 主打的就是「貼近群眾」，例如直接將活動(dòng)搬到小紅書(shū)上，讓更多人能近距離接觸 AI。

王鐵震認(rèn)為，未來(lái) AI 發(fā)展的關(guān)鍵則在于：「不僅僅要讓 AI 的發(fā)展能幫助到各行各業(yè)的人，也要讓各行各業(yè)的人加入進(jìn)來(lái)對(duì) AI 的發(fā)展產(chǎn)生幫助。」

AI 2.0 需要新的「學(xué)習(xí)」

周健工：之前你說(shuō)這半年一直在學(xué)習(xí)，你在學(xué)什么？通過(guò)你的學(xué)習(xí)，對(duì)生成人工智能這個(gè)行業(yè)的前景有什么新的感悟嗎？

王鐵震：過(guò)去五六年我在谷歌都是在做 AI，我們當(dāng)時(shí)做谷歌人工智能的訓(xùn)練框架，當(dāng)時(shí)我們?cè)诜?wù)器上、手機(jī)上都有做過(guò)一些工作。但是我發(fā)現(xiàn)當(dāng)時(shí)那一波的人工智能和現(xiàn)在的 AI 2.0 有很大的不同，因?yàn)橐郧暗哪Ｐ推鋵?shí)沒(méi)有那么聰明，它的通用性也不好，每一個(gè)新場(chǎng)景都要重新去訓(xùn)練，所以它是面向開(kāi)發(fā)者的一個(gè) AI 工具，并不是普通人也能用起來(lái)的 AI 工具。

去年大概 10 月、11 月的時(shí)候，我發(fā)現(xiàn)這一波 AI 浪潮非常的不一樣。像是 Stable Diffusion，玩得最火的可能不是 AI 圈的人，而是學(xué)習(xí)藝術(shù)、設(shè)計(jì)的這些人，之后的 ChatGPT 更是很多美國(guó)的普通學(xué)生在用來(lái)寫(xiě)作業(yè)了，這個(gè)給我的感覺(jué)非常不一樣。

當(dāng)時(shí)正好有一個(gè)契機(jī)，我就加入了 Hugging Face，加入之后一直在學(xué)習(xí)這方面比較新的技術(shù)。其實(shí)也不只是技術(shù)，我還需要向開(kāi)發(fā)者去學(xué)習(xí) To C 的東西，讓每個(gè)人都能把大模型用起來(lái)，根據(jù)自己的需求去將大模型與自己的領(lǐng)域相結(jié)合。

我也在學(xué)習(xí)大家是怎么使用這個(gè)技術(shù)的，它能去解決什么樣的問(wèn)題，看到大家的一些創(chuàng)新想法會(huì)感到非常開(kāi)心。所以前六個(gè)月，我基本上都在學(xué)習(xí)的過(guò)程中，每天都是非常充實(shí)，感覺(jué) 24 個(gè)小時(shí)完全不夠用。

王鐵震在 WAIC2023 大會(huì)上介紹 Hugging Face 開(kāi)源社區(qū)｜WAIC

開(kāi)源的最大優(yōu)勢(shì)是「透明」

周健工：行業(yè)內(nèi)現(xiàn)在產(chǎn)生的一個(gè)爭(zhēng)論是，閉源和開(kāi)源的模型是怎么共同推動(dòng)生成式人工智能往前發(fā)展的？它們各自有哪些特點(diǎn)和不同？

王鐵震：以大模型為例，大家最熟悉的 ChatGPT 其實(shí)就是一個(gè)閉源的模型，目前 GPT-4 是效果最好的模型，這毋庸置疑。很多企業(yè)在創(chuàng)業(yè)的早期也都是選擇接入 ChatGPT，直接在外面做一些 prompt engineering，做 fact database，就可以很快地把產(chǎn)品做成。

但是隨著規(guī)模的擴(kuò)大，或者說(shuō)因?yàn)椴煌I(lǐng)域的一些要求，就會(huì)發(fā)現(xiàn)數(shù)據(jù)安全、企業(yè)部署的場(chǎng)景、部署的成本以及大模型功能上的問(wèn)題。大家發(fā)現(xiàn) ChatGPT 并不能完整滿足他們的需求之后，企業(yè)就會(huì)想能不能擁有一個(gè)自己可控、可調(diào)、可「魔改」的模型。

Hugging Face 當(dāng)時(shí)贊助了一個(gè)叫做 Big Science 的開(kāi)源組織，他們做了一個(gè) Bloom 模型，是一個(gè)千億級(jí)的模型。我們當(dāng)時(shí)把這個(gè)模型訓(xùn)練下來(lái)，用了 300 多塊 A100（英偉達(dá) GPU），花了 100 多天，最后算下來(lái)成本非常高。包括訓(xùn)練產(chǎn)生的碳排量，其實(shí)相當(dāng)于排放了 50 多噸的二氧化碳才計(jì)算出來(lái)，所以從頭訓(xùn)練一個(gè)大模型是非常不經(jīng)濟(jì)的，尤其是對(duì)于中小型的公司來(lái)講。

但是我們把模型訓(xùn)練完成后，包括很多其他做開(kāi)源的大模型，會(huì)把這個(gè)模型公布出來(lái)，大家可以基于這個(gè)模型去做一些場(chǎng)景的調(diào)優(yōu)，這樣對(duì)于企業(yè)的要求就更低。企業(yè)不再需要那么多顯卡，也不需要那么多時(shí)間，甚至稍微少一點(diǎn)的算力和數(shù)據(jù)都可以做到這個(gè)事情。這其實(shí)是開(kāi)源社區(qū)給大家?guī)?lái)的非常好的機(jī)會(huì)。

往更遠(yuǎn)說(shuō)，開(kāi)源社區(qū)所有的東西都是透明的，你知道這個(gè)模型用了哪些數(shù)據(jù)，包括最近大家都在說(shuō)網(wǎng)絡(luò)信息有被遺忘的權(quán)利，但是閉源模型的數(shù)據(jù)被吃掉后，你永遠(yuǎn)不知道是不是有些關(guān)于你的事情會(huì)在互聯(lián)網(wǎng)上被公布出去，相反，開(kāi)源模型所有的數(shù)據(jù)集都是公開(kāi)的。

我們?cè)谧龃竽Ｐ偷臅r(shí)候設(shè)計(jì)了一個(gè)特殊的機(jī)制，就是允許你 opt out（退出）。因?yàn)槟Ｐ偷臄?shù)據(jù)集、模型訓(xùn)練，以及模型的發(fā)布、優(yōu)化都是在網(wǎng)上全部公開(kāi)的，所以你隨時(shí)可以發(fā)現(xiàn)這個(gè)模型在做什么事情。所謂的 opt out 機(jī)制，是說(shuō)如果我的數(shù)據(jù)不想被大模型吃掉，不想用于這個(gè)大模型的訓(xùn)練，你隨時(shí)可以把它抹掉。

所以我認(rèn)為開(kāi)源相對(duì)閉源一個(gè)非常大的優(yōu)勢(shì)就是——透明。開(kāi)源模型可以給每個(gè)人更多的選擇，每個(gè)國(guó)家、企業(yè)都可以按照自己的需求去定制。另外，開(kāi)源還是一個(gè)非常好的工具，它可以通過(guò)在線的平臺(tái)去團(tuán)結(jié)全世界的開(kāi)發(fā)者，只要你有想法、有自己的思路，就可以加入到開(kāi)源社區(qū)，把你做的事情很快地跟全世界分享。

周健工：開(kāi)幕的那天 Yann LeCun 楊立昆有一個(gè)對(duì)話，他認(rèn)為解決大模型現(xiàn)存問(wèn)題的唯一的出路就是開(kāi)源，你怎么評(píng)論這句話？

王鐵震：站在 Hugging Face 的角度，我們其實(shí)是非常期望通過(guò)開(kāi)源的方式把大模型普惠化，讓每一個(gè)公司、每一個(gè)人都能擁有自己的大模型去做自己的事情，去解決數(shù)據(jù)隱私、數(shù)據(jù)安全等問(wèn)題。

包括最近有很多企業(yè)都明確的規(guī)定他們的員工不允許使用 ChatGPT 這種模型，甚至有一些謠言說(shuō) Google 的員工也不允許使用自己的 Bard 模型，因?yàn)閾?dān)心隱私數(shù)據(jù)的泄露。

還有一點(diǎn)是，為了讓模型在某一個(gè)領(lǐng)域去更加趨同人的行為，ChatGPT 做了很多工作，但是它只給了我們一個(gè)選擇。通過(guò)開(kāi)源，我們每一個(gè)人都可以根據(jù)自己的需求去生成模型。

「社區(qū)」是 Hugging Face 非常強(qiáng)調(diào)的文化基因｜Hugging Face

AI 玩上小紅書(shū)

周健工：Hugging Face 上有 25 萬(wàn)個(gè)模型，這個(gè)數(shù)字很令人吃驚，這 25 萬(wàn)個(gè)模型都是什么樣的模型？他們?yōu)槭裁炊寂艿侥銈兊钠脚_(tái)？能不能簡(jiǎn)單科普一下。

王鐵震：我們剛才聊得很多都是 NLP（自然語(yǔ)言處理）領(lǐng)域的文本大模型，其實(shí)在我們開(kāi)源社區(qū)看來(lái)，這只是千千萬(wàn)萬(wàn)大模型種類的一種。

為什么千千萬(wàn)萬(wàn)的模型都選擇上傳到 Hugging Face，我想從兩點(diǎn)來(lái)回答，一個(gè)是說(shuō)技術(shù)層面，一個(gè)是從社區(qū)層面。

技術(shù)層面

技術(shù)層面上其實(shí)我們是像 AI 界的 GitHub，比 GitHub 更適合 AI 界的一點(diǎn)，是我們支持大文件的上傳，我們免費(fèi)提供 hosting，免費(fèi)提供全球 CDN 的 deliver。這些對(duì)大家的幫助是非常大的，而且大家基于我們的平臺(tái)可以做版本控制以及開(kāi)源協(xié)作，每個(gè)人都可以來(lái)貢獻(xiàn)一點(diǎn)，最終把開(kāi)源模型變得更好。

在技術(shù)上我們還提供了可以一鍵部署的功能，你可以點(diǎn)一下鼠標(biāo)就將模型快速的部署到亞馬遜云上，很快就可以將模型使用起來(lái)。

文化層面

從社區(qū)文化上來(lái)說(shuō)，我們是一個(gè)非常重視開(kāi)源社區(qū)的公司，我們特別希望幫助大家，希望能有更多的開(kāi)發(fā)者參與到開(kāi)源的事業(yè)中，所以我們特別愿意去接受大家的反饋，去跟大家做互動(dòng)。

比如對(duì)于第一次來(lái)貢獻(xiàn)代碼的開(kāi)發(fā)者，我們會(huì)對(duì)他們進(jìn)行非常細(xì)致的輔導(dǎo)，這其實(shí)很花時(shí)間，而且投入產(chǎn)出比不高，但我們覺(jué)得這是一個(gè)非常有價(jià)值并且重要的事情，因?yàn)槲覀円岩粋€(gè)開(kāi)源社區(qū)做起來(lái)。

我舉個(gè)例子，昨天晚上我看到微信群里有人說(shuō)覺(jué)得 Hugging Face 很有意思，因?yàn)樗熬褪潜г沽艘幌挛覀兊南到y(tǒng)有的變量名不是特別好，第二天就發(fā)現(xiàn) Hugging Face 的員工專門(mén)開(kāi)了一個(gè) issue 來(lái)討論這個(gè)問(wèn)題。

我們社區(qū)的文化實(shí)際上是非常好的，每一個(gè)人到社區(qū)里都有一種家的感覺(jué)，大家也更愿意使用我們的平臺(tái)。

周健工：你談到的社區(qū)其實(shí)有三類用戶，第一批是早期的研究者，第二批是開(kāi)發(fā)者，第三批是真正的技術(shù)使用者，能不能結(jié)合你的工作來(lái)聊聊未來(lái) Hugging Face 社區(qū)的發(fā)展方向？

王鐵震：我們想要做 AI 的普惠化，希望每一個(gè)國(guó)家和企業(yè)都能有自己的模型，并且每個(gè)人也有使用 AI 的能力。所以我們?cè)缙诘墓ぷ鞔_實(shí)是在關(guān)注研究者，在思考怎么方便他們?nèi)ジ斓貏?chuàng)造一個(gè)模型，隨后我們?cè)O(shè)計(jì)了一套 API 的流程，讓大家可以用同樣的 API 去快速的調(diào)用基于 Transformer 或者 Diffusion base 的模型。

慢慢地我們擴(kuò)展到了工業(yè)界，希望抹平學(xué)術(shù)界和工業(yè)界之間的差異，讓一個(gè)模型從學(xué)術(shù)界拿過(guò)來(lái)之后很快就能在工業(yè)界用起來(lái)。現(xiàn)在我們發(fā)現(xiàn)新一波的生成式人工智能對(duì)每一個(gè)非技術(shù)向的用戶都有很大的幫助，所以我們也希望進(jìn)一步抹平這方面的門(mén)檻。

我們?cè)?Hugging Face 上提供了一些非常有意思的工具。正常來(lái)說(shuō)你在 GitHub 上看到一個(gè) repo（repository，可以理解為存放項(xiàng)目的倉(cāng)庫(kù)），要把它用起來(lái)需要自己裝環(huán)境搭配，對(duì)于很多非技術(shù)向的用戶這是一個(gè)很麻煩的事情，因?yàn)樗赡芸吹竭@堆代碼之后也用不起來(lái)。

我們做了一個(gè) spaces，可以在線免費(fèi)給用戶提供一個(gè)容器環(huán)境，開(kāi)發(fā)者可以把它的模型直接部署在 spaces 上，當(dāng)用戶進(jìn)來(lái)的時(shí)候看到就不僅僅是一堆代碼，他看到的是一個(gè)鮮活的應(yīng)用，可以直接在上面點(diǎn)一點(diǎn)玩起來(lái)，直接看到效果。我覺(jué)得這個(gè)對(duì)大家?guī)椭翘貏e大的。

另外我們也會(huì)在國(guó)內(nèi)搞很多活動(dòng)，希望幫助更多人去了解 AI 模型是怎么回事兒。

Hugging Face 在小紅書(shū)上開(kāi)展的 AI 頭像活動(dòng)｜Hugging Face

插個(gè)廣告，我們最近在小紅書(shū)上進(jìn)行基于我們 Diffusion 的活動(dòng)，希望大家能去生成自己的卡通風(fēng)格頭像，跟其他產(chǎn)品不同的是我們提供了一個(gè)開(kāi)發(fā)的環(huán)境，你可以在其中看到每執(zhí)行一步程序，圖像產(chǎn)生的結(jié)果里面會(huì)有很多參數(shù)，你可以把黑盒打開(kāi)，了解到這個(gè)模型里面到底在做些什么，然后進(jìn)一步將更多的 AI 能力和實(shí)際需求結(jié)合起來(lái)。

我們最近也在做 AI for Gaming，希望做游戲的同學(xué)能夠了解 AI 的能力，讓做 AI 的人也了解游戲場(chǎng)景中他們?cè)陉P(guān)注什么，把兩者結(jié)合起來(lái)，我們認(rèn)為這個(gè)方向會(huì)有很多有意思的探索。

總結(jié)一下，我認(rèn)為不僅僅要讓 AI 的發(fā)展能幫助到各行各業(yè)的人，其實(shí)也要讓各行各業(yè)的人加入進(jìn)來(lái)對(duì) AI 的發(fā)展產(chǎn)生幫助。大家可以一起探索這些前沿未來(lái)的方向，這不是 AI 圈自己就能解決的一個(gè)問(wèn)題，我們要把具體的場(chǎng)景帶進(jìn)來(lái)。