四虎综合网,老子影院午夜伦不卡国语,色花影院,五月婷婷丁香六月,成人激情视频网,动漫av网站免费观看,国产午夜亚洲精品一级在线

每日經(jīng)濟(jì)新聞
要聞

每經(jīng)網(wǎng)首頁(yè) > 要聞 > 正文

投資人談ChatGPT浪潮中的3類(lèi)創(chuàng)業(yè)機(jī)遇:與元宇宙、Web3有本質(zhì)區(qū)別,但第一波跳出來(lái)太多“蹭熱度的”

每日經(jīng)濟(jì)新聞 2023-03-09 22:57:55

◎劉天杰認(rèn)為,(ChatGPT)這一波興起的AI浪潮與元宇宙、Web3有本質(zhì)上的區(qū)別,互聯(lián)網(wǎng)的生態(tài)得以重建了。

每經(jīng)記者 文巧    每經(jīng)編輯 高涵    

圖片來(lái)源:視覺(jué)中國(guó)

ChatGPT依然在攪動(dòng)人工智能(AI)風(fēng)云。盡管谷歌在過(guò)去的兩年中由于謹(jǐn)慎的態(tài)度未能發(fā)布Bard,讓OpenAI搶占先機(jī)。但作為硅谷巨頭,谷歌從來(lái)不缺乏“后來(lái)居上”的決心和實(shí)力。

當(dāng)?shù)貢r(shí)間3月6日,來(lái)自谷歌和德國(guó)柏林工業(yè)大學(xué)的一組AI研究人員公布了史上最大的視覺(jué)語(yǔ)言模型:PaLM-E。作為一種多模態(tài)具身視覺(jué)語(yǔ)言模型,PaLM-E能將視覺(jué)和語(yǔ)言集成到機(jī)器人控制中。

這個(gè)消息,讓已經(jīng)在AI投資圈深耕多年的劉天杰興奮起來(lái)。劉天杰是華映資本董事,也是AIGC領(lǐng)域的一線(xiàn)投資人。早在去年下半年,由ChatGPT模型前身GPT3驅(qū)動(dòng)的戀愛(ài)應(yīng)用——AI聊天軟件Replika就走入了他的視線(xiàn),他意識(shí)到基于NLP(自然語(yǔ)言處理)的AI模型已經(jīng)較以前有了變化。

在接受《每日經(jīng)濟(jì)新聞》記者采訪(fǎng)時(shí),他表示,“我們理解,它(PaLM-E)已經(jīng)跟真實(shí)世界有一些交互能力。”巧合的是,在他的預(yù)想中,ChatGPT引領(lǐng)的這條路子是很清楚的,他看重的就是未來(lái)更多各行各業(yè)能夠去做AI賦能的應(yīng)用,比如SaaS、RPA(機(jī)器人流程自動(dòng)化),甚至是機(jī)器人。

隨著ChatGPT及其API的發(fā)布,這一大模型身后的藍(lán)海讓許多創(chuàng)業(yè)公司蜂擁而至。劉天杰認(rèn)為,這一波興起的AI浪潮與元宇宙、Web3有本質(zhì)上的區(qū)別,互聯(lián)網(wǎng)的生態(tài)得以重建了。但在泥沙俱下的市場(chǎng)中,第一波有很多“蹭熱度的”,只有擁有真實(shí)用戶(hù)和了解用戶(hù)需求的項(xiàng)目才能生存下來(lái)。

ChatGPT出圈,多領(lǐng)域創(chuàng)業(yè)者擁抱大模型

2022年下半年,一款A(yù)I聊天軟件Replika突然火爆全球。人們驚喜地發(fā)現(xiàn),與AI聊得越多,AI就越“懂”你,甚至還會(huì)提煉出用戶(hù)的語(yǔ)氣。更有意思的是,該軟件的創(chuàng)始人在采訪(fǎng)中表示,約有40%的用戶(hù)描述自己與AI為戀人關(guān)系。

Replika這款聊天軟件正是基于OpenAI的GPT-3大模型,它也是ChatGPT基于的GPT-3.5模型的前身。很快,Replika就走入了劉天杰的視線(xiàn)。他意識(shí)到,基于NLP(自然語(yǔ)言處理)的AI模型已經(jīng)較以前有了很大變化,他開(kāi)始關(guān)注相關(guān)領(lǐng)域的投資機(jī)會(huì)。

隨著ChatGPT的公布,以及GPT-3.5 Turbo的API開(kāi)放,AI的浪潮蔓延到各行各業(yè),市場(chǎng)對(duì)此的反應(yīng)可以用“狂歡”二字來(lái)概括。在劉天杰看來(lái),實(shí)際上,開(kāi)放API是符合預(yù)期的,這個(gè)項(xiàng)目原本就是開(kāi)源的,此前也已經(jīng)有很多人在用GPT3或者GPT-3.5的開(kāi)源代碼來(lái)做應(yīng)用。

不過(guò),ChatGPT如此“出圈”,還是超出了他的意料。放眼整個(gè)AIGC領(lǐng)域,“國(guó)內(nèi)現(xiàn)在肯定是風(fēng)起云涌。硅谷這股風(fēng)比國(guó)內(nèi)要更大,因?yàn)椋▏?guó)外)幾個(gè)大模型都已經(jīng)成熟了,美國(guó)那邊至少已經(jīng)有幾百上千的項(xiàng)目涌現(xiàn)出來(lái)。”

“(ChatGPT)確實(shí)加快了公眾對(duì)于AIGC或者AI領(lǐng)域的關(guān)注。但是,這條路進(jìn)化到今天并非一蹴而就。包括ChatGPT的基礎(chǔ)模型Transformer,實(shí)際上也是2017年就提出來(lái)了。”劉天杰告訴《每日經(jīng)濟(jì)新聞》記者,“從2017年到今天,大家一直在做大量的工程化工作。到今天ChatGPT有這個(gè)成績(jī),跟之前多年的積累是息息相關(guān)的。”

他向每經(jīng)記者透露,目前看到的創(chuàng)業(yè)者其實(shí)不僅僅是AI領(lǐng)域的,其他很多領(lǐng)域也在開(kāi)始擁抱新的大模型以及新的AI能力。

“我們更多地會(huì)把這個(gè)領(lǐng)域定義成AI+,而不是AIGC。意思就是,利用AI賦能給各行各業(yè)。我覺(jué)得未來(lái)這將是(所有公司的)一個(gè)基礎(chǔ)能力。”劉天杰說(shuō)道。

OpenAI用低價(jià)策略構(gòu)建“AI飛輪”

OpenAI在ChatGPT上的腳步顯得非常主動(dòng)和激動(dòng)。大熱剛剛3個(gè)月,ChatGPT API就高調(diào)上線(xiàn)了。這個(gè)API由GPT-3.5 Turbo模型支持。HerAI App的開(kāi)發(fā)者王紹此前告訴《每日經(jīng)濟(jì)新聞》記者,接口服務(wù)定價(jià)大約是3分/1000個(gè)漢字。這一定價(jià)較GPT-3.5模型便宜90%。

“Turbo就是加速的意思,它的反應(yīng)速度是要比ChatGPT要快很多的。從底層算力上看,其實(shí)沒(méi)有發(fā)生太大的變化。但成本降低、反應(yīng)速度提高,這只能說(shuō)明一件事,就是GPT-3.5 Turbo模型實(shí)際使用的參數(shù)相比ChatGPT下降了。”劉天杰說(shuō)道。

他隨即向每經(jīng)記者解釋?zhuān)?ldquo;比如說(shuō),你有1750億個(gè)參數(shù),但是你喂給它的訓(xùn)練集很小,也訓(xùn)練不出效果,會(huì)導(dǎo)致大量的問(wèn)題,我們稱(chēng)其為過(guò)擬合。所以,參數(shù)大意味著訓(xùn)練集要足夠大。但是,參數(shù)越大并不意味著模型的表現(xiàn)越好,越能理解人的語(yǔ)義。恰恰相反的是,現(xiàn)在大家都想用更少的參數(shù)訓(xùn)練出一個(gè)更好的大模型。”

為什么GPT-3.5 Turbo能在更小的參數(shù)上實(shí)現(xiàn)更好的效果呢?“實(shí)際上,ChatGPT已經(jīng)積累了大量用戶(hù)使用的實(shí)際對(duì)話(huà)集,這些對(duì)話(huà)集相比OpenAI使用無(wú)監(jiān)督訓(xùn)練的語(yǔ)義集,要更準(zhǔn)確、更高質(zhì)量。”劉天杰說(shuō)道,“因?yàn)?,用?hù)實(shí)際使用的對(duì)話(huà)中有上下文、有反饋,收集這些數(shù)據(jù)后再去訓(xùn)練模型,新的模型就會(huì)比之前更精確,就達(dá)到了用更小的參數(shù)量實(shí)現(xiàn)更準(zhǔn)確的效果。

在劉天杰看來(lái),GPT-3.5 Turbo成本的下降,核心的一點(diǎn)就是實(shí)際計(jì)算的成本確實(shí)比之前要低,因?yàn)樗哪P透鼫?zhǔn)了。

“當(dāng)然,一方面也因?yàn)镺penAI本身不是一個(gè)盈利機(jī)構(gòu),并且它也需要更多的用戶(hù)參與進(jìn)來(lái),去形成這種實(shí)際的對(duì)話(huà)集,再輸入模型中做進(jìn)一步的訓(xùn)練,而低價(jià)也會(huì)導(dǎo)致用戶(hù)量進(jìn)一步的增長(zhǎng)。”他說(shuō)道。

劉天杰表示,這就是所謂的“AI飛輪”。“用戶(hù)提高了,數(shù)據(jù)變多了,模型更準(zhǔn)了,用戶(hù)自然更多了。飛輪一旦跑起來(lái),OpenAI就能甩掉其他對(duì)手,這也是它低價(jià)策略的一個(gè)原因。

ChatGPT浪潮重構(gòu)互聯(lián)網(wǎng)生態(tài),三類(lèi)創(chuàng)業(yè)機(jī)會(huì)涌現(xiàn)

隨著ChatGPT API的開(kāi)放,調(diào)用這個(gè)接口來(lái)實(shí)現(xiàn)AI賦能成為許多創(chuàng)業(yè)公司的追求,這種熱潮不免讓人想起元宇宙、Web3等新概念引領(lǐng)的風(fēng)潮。許多人會(huì)問(wèn),看看兩年前扎克伯格看好的元宇宙如今在哪兒,未來(lái)ChatGPT又會(huì)在哪兒?不過(guò),在劉天杰看來(lái),這一波興起的AI浪潮與前一段時(shí)間的元宇宙、Web3有本質(zhì)上的區(qū)別。

“元宇宙、Web3是一個(gè)分布式的東西。在這里,大家希望互聯(lián)網(wǎng)信息或者經(jīng)濟(jì)系統(tǒng),都用一個(gè)分布式、加密式的方式去重構(gòu)。”他向《每日經(jīng)濟(jì)新聞》記者說(shuō)道,“但當(dāng)前這一波AI浪潮恰恰相反,它會(huì)變成一個(gè)非常集中的東西,未來(lái)AI的底層能力將由有基礎(chǔ)預(yù)訓(xùn)練大模型能力的幾個(gè)大廠提供,其他人就在這些底層大模型上去開(kāi)發(fā)應(yīng)用。”

“所以說(shuō),整個(gè)互聯(lián)網(wǎng)的生態(tài)我認(rèn)為是重構(gòu)了。這有點(diǎn)類(lèi)似于當(dāng)年的云服務(wù),由幾個(gè)大廠來(lái)做云服務(wù)廠商,在云之上,你們?nèi)ラ_(kāi)發(fā)各種各樣的應(yīng)用。”劉天杰進(jìn)一步說(shuō)道。

在ChatGPT引領(lǐng)的這一波AI浪潮中,劉天杰看到了三大層次的創(chuàng)業(yè)機(jī)會(huì)。第一類(lèi)是做中文的底層大模型。“這類(lèi)創(chuàng)業(yè)者往往都是高校出來(lái)的,比如說(shuō)清華系有一大堆人在做底層大模型。但任重而道遠(yuǎn),訓(xùn)練底層大模型,一是非常燒錢(qián),二是要有足夠強(qiáng)的算力。”他告訴每經(jīng)記者。

圖片來(lái)源:視覺(jué)中國(guó)

“另外,小公司收集訓(xùn)練集的能力不夠,而大模型的‘大’,大在它的訓(xùn)練集。小公司并沒(méi)有積累大量的數(shù)據(jù)。”他說(shuō)道。

第二類(lèi)是中間層,比如做模型的微調(diào)、預(yù)訓(xùn)練;或者在底層大模型的基礎(chǔ)上訓(xùn)練新模型,比如虛擬人模型。“這些模型是基于底層大模型的語(yǔ)義能力,然后在這個(gè)能力之上加了各種限制條件。”他說(shuō)道,這里有一些創(chuàng)業(yè)機(jī)會(huì),但并不算多。

第三類(lèi)是應(yīng)用層,這也是大多數(shù)創(chuàng)業(yè)公司正在探究的道路。“目前最直接的是生成圖片、文字、視頻甚至3D內(nèi)容。但是這些相對(duì)來(lái)說(shuō)壁壘不夠,因?yàn)槟P鸵膊皇悄愕?,?xùn)練集也不是你的,無(wú)非就是做一點(diǎn)優(yōu)化的工作。”劉天杰說(shuō)道。

“當(dāng)然還有更前沿的,就是科學(xué)家團(tuán)隊(duì)在探索真正的終局——通用智能,但這一塊現(xiàn)在還在一個(gè)非常早期的階段。”他向每經(jīng)記者介紹道。

泥沙俱下,用戶(hù)需求才是創(chuàng)業(yè)的根本

在劉天杰的預(yù)想中,ChatGPT引領(lǐng)的這條路子是很清楚的,他看重的就是未來(lái)更多各行各業(yè)能夠去做AI賦能的應(yīng)用,比如SaaS、RPA(機(jī)器人流程自動(dòng)化),甚至是機(jī)器人。

他現(xiàn)在主要關(guān)注兩大板塊,一是AI生成3D資產(chǎn)。“因?yàn)檫@一塊有真正會(huì)掏錢(qián)的客戶(hù)——游戲公司。這一塊是他們的痛點(diǎn),因?yàn)橹谱?D內(nèi)容非常昂貴,如果能用AI制作3D內(nèi)容,是他們求之不得的。但目前大模型的能力還解決不了3D的生成,這是一個(gè)我們會(huì)重點(diǎn)關(guān)注的領(lǐng)域。”

二是文字轉(zhuǎn)換動(dòng)作的應(yīng)用。“也就是說(shuō),我用AI指揮實(shí)體的東西去執(zhí)行操作,比如說(shuō)機(jī)器人、RPA(機(jī)器人流程自動(dòng)化)、全局的智能助手等。這一塊涉及到大模型的多模態(tài)輸出和輸入,是一個(gè)相對(duì)來(lái)說(shuō)比較前沿的領(lǐng)域,也是大模型沒(méi)有完全解決的領(lǐng)域。”劉天杰解釋道。

市場(chǎng)太熱,到底哪些才是靠譜的項(xiàng)目?對(duì)此,一些投資人直言“又興奮又焦慮”。

不過(guò),劉天杰還沒(méi)到焦慮的地步,他直言,“我們看了太多這種新技術(shù)、新概念的例子,第一波(沖在前面的)有很多蹭熱度的。從經(jīng)典的蓋特納創(chuàng)業(yè)模型來(lái)看,新技術(shù)都會(huì)先經(jīng)歷這樣的事情,后面真正能使用這個(gè)技術(shù)的人才會(huì)崛起。”

他向《每日經(jīng)濟(jì)新聞》記者透露,很多很強(qiáng)的創(chuàng)業(yè)者,例如傳統(tǒng)大廠里面職位非常高的人,或者在科學(xué)界有頭有臉的人,也都被吸引入場(chǎng)。“國(guó)內(nèi)比如說(shuō)美團(tuán)的王慧文、快手CTO以及某電商大廠技術(shù)負(fù)責(zé)人。”

據(jù)劉天杰介紹,某電商大廠技術(shù)負(fù)責(zé)人提出了Transformer大模型中一個(gè)關(guān)鍵的技術(shù)路線(xiàn),叫做多頭注意力機(jī)制。“泥沙俱下,當(dāng)然有大量蹭熱度的,但是也有很多很強(qiáng)的創(chuàng)業(yè)者在開(kāi)始干這件事。”他說(shuō)道。

ChatGPT身后的藍(lán)海讓許多創(chuàng)業(yè)公司蜂擁而至。在劉天杰看來(lái),“現(xiàn)在許多所謂的AIGC項(xiàng)目,并非這一波預(yù)訓(xùn)練大模型(ChatGPT)之后產(chǎn)生的,它的技術(shù)路線(xiàn)上其實(shí)跟大模型沒(méi)有任何關(guān)系,相當(dāng)于之前傳統(tǒng)范式的AI上,包了一層AIGC的殼,就非說(shuō)自己是大模型,但實(shí)際上跟大模型沒(méi)什么關(guān)系。”

他認(rèn)為,能夠落地的應(yīng)用需要?jiǎng)?chuàng)業(yè)者在對(duì)應(yīng)的細(xì)分產(chǎn)業(yè)中做實(shí)。“你要理解產(chǎn)業(yè)本身的經(jīng)濟(jì)機(jī)制和運(yùn)行規(guī)則,以及用戶(hù)需求,尤其用戶(hù)需求永遠(yuǎn)是最重要的。因?yàn)樵谶@里,AI只是提供效率的工具,它類(lèi)似一個(gè)乘數(shù)。你必須得有前面的‘1’,也就是真實(shí)的客戶(hù)和客戶(hù)需求。”

封面圖片來(lái)源:視覺(jué)中國(guó)

如需轉(zhuǎn)載請(qǐng)與《每日經(jīng)濟(jì)新聞》報(bào)社聯(lián)系。
未經(jīng)《每日經(jīng)濟(jì)新聞》報(bào)社授權(quán),嚴(yán)禁轉(zhuǎn)載或鏡像,違者必究。

讀者熱線(xiàn):4008890008

特別提醒:如果我們使用了您的圖片,請(qǐng)作者與本站聯(lián)系索取稿酬。如您不希望作品出現(xiàn)在本站,可聯(lián)系我們要求撤下您的作品。

圖片來(lái)源:視覺(jué)中國(guó) ChatGPT依然在攪動(dòng)人工智能(AI)風(fēng)云。盡管谷歌在過(guò)去的兩年中由于謹(jǐn)慎的態(tài)度未能發(fā)布Bard,讓OpenAI搶占先機(jī)。但作為硅谷巨頭,谷歌從來(lái)不缺乏“后來(lái)居上”的決心和實(shí)力。 當(dāng)?shù)貢r(shí)間3月6日,來(lái)自谷歌和德國(guó)柏林工業(yè)大學(xué)的一組AI研究人員公布了史上最大的視覺(jué)語(yǔ)言模型:PaLM-E。作為一種多模態(tài)具身視覺(jué)語(yǔ)言模型,PaLM-E能將視覺(jué)和語(yǔ)言集成到機(jī)器人控制中。 這個(gè)消息,讓已經(jīng)在AI投資圈深耕多年的劉天杰興奮起來(lái)。劉天杰是華映資本董事,也是AIGC領(lǐng)域的一線(xiàn)投資人。早在去年下半年,由ChatGPT模型前身GPT3驅(qū)動(dòng)的戀愛(ài)應(yīng)用——AI聊天軟件Replika就走入了他的視線(xiàn),他意識(shí)到基于NLP(自然語(yǔ)言處理)的AI模型已經(jīng)較以前有了變化。 在接受《每日經(jīng)濟(jì)新聞》記者采訪(fǎng)時(shí),他表示,“我們理解,它(PaLM-E)已經(jīng)跟真實(shí)世界有一些交互能力?!鼻珊系氖?,在他的預(yù)想中,ChatGPT引領(lǐng)的這條路子是很清楚的,他看重的就是未來(lái)更多各行各業(yè)能夠去做AI賦能的應(yīng)用,比如SaaS、RPA(機(jī)器人流程自動(dòng)化),甚至是機(jī)器人。 隨著ChatGPT及其API的發(fā)布,這一大模型身后的藍(lán)海讓許多創(chuàng)業(yè)公司蜂擁而至。劉天杰認(rèn)為,這一波興起的AI浪潮與元宇宙、Web3有本質(zhì)上的區(qū)別,互聯(lián)網(wǎng)的生態(tài)得以重建了。但在泥沙俱下的市場(chǎng)中,第一波有很多“蹭熱度的”,只有擁有真實(shí)用戶(hù)和了解用戶(hù)需求的項(xiàng)目才能生存下來(lái)。 ChatGPT出圈,多領(lǐng)域創(chuàng)業(yè)者擁抱大模型 2022年下半年,一款A(yù)I聊天軟件Replika突然火爆全球。人們驚喜地發(fā)現(xiàn),與AI聊得越多,AI就越“懂”你,甚至還會(huì)提煉出用戶(hù)的語(yǔ)氣。更有意思的是,該軟件的創(chuàng)始人在采訪(fǎng)中表示,約有40%的用戶(hù)描述自己與AI為戀人關(guān)系。 Replika這款聊天軟件正是基于OpenAI的GPT-3大模型,它也是ChatGPT基于的GPT-3.5模型的前身。很快,Replika就走入了劉天杰的視線(xiàn)。他意識(shí)到,基于NLP(自然語(yǔ)言處理)的AI模型已經(jīng)較以前有了很大變化,他開(kāi)始關(guān)注相關(guān)領(lǐng)域的投資機(jī)會(huì)。 隨著ChatGPT的公布,以及GPT-3.5Turbo的API開(kāi)放,AI的浪潮蔓延到各行各業(yè),市場(chǎng)對(duì)此的反應(yīng)可以用“狂歡”二字來(lái)概括。在劉天杰看來(lái),實(shí)際上,開(kāi)放API是符合預(yù)期的,這個(gè)項(xiàng)目原本就是開(kāi)源的,此前也已經(jīng)有很多人在用GPT3或者GPT-3.5的開(kāi)源代碼來(lái)做應(yīng)用。 不過(guò),ChatGPT如此“出圈”,還是超出了他的意料。放眼整個(gè)AIGC領(lǐng)域,“國(guó)內(nèi)現(xiàn)在肯定是風(fēng)起云涌。硅谷這股風(fēng)比國(guó)內(nèi)要更大,因?yàn)椋▏?guó)外)幾個(gè)大模型都已經(jīng)成熟了,美國(guó)那邊至少已經(jīng)有幾百上千的項(xiàng)目涌現(xiàn)出來(lái)。” “(ChatGPT)確實(shí)加快了公眾對(duì)于AIGC或者AI領(lǐng)域的關(guān)注。但是,這條路進(jìn)化到今天并非一蹴而就。包括ChatGPT的基礎(chǔ)模型Transformer,實(shí)際上也是2017年就提出來(lái)了?!眲⑻旖芨嬖V《每日經(jīng)濟(jì)新聞》記者,“從2017年到今天,大家一直在做大量的工程化工作。到今天ChatGPT有這個(gè)成績(jī),跟之前多年的積累是息息相關(guān)的?!? 他向每經(jīng)記者透露,目前看到的創(chuàng)業(yè)者其實(shí)不僅僅是AI領(lǐng)域的,其他很多領(lǐng)域也在開(kāi)始擁抱新的大模型以及新的AI能力。 “我們更多地會(huì)把這個(gè)領(lǐng)域定義成AI+,而不是AIGC。意思就是,利用AI賦能給各行各業(yè)。我覺(jué)得未來(lái)這將是(所有公司的)一個(gè)基礎(chǔ)能力。”劉天杰說(shuō)道。 OpenAI用低價(jià)策略構(gòu)建“AI飛輪” OpenAI在ChatGPT上的腳步顯得非常主動(dòng)和激動(dòng)。大熱剛剛3個(gè)月,ChatGPTAPI就高調(diào)上線(xiàn)了。這個(gè)API由GPT-3.5Turbo模型支持。HerAIApp的開(kāi)發(fā)者王紹此前告訴《每日經(jīng)濟(jì)新聞》記者,接口服務(wù)定價(jià)大約是3分/1000個(gè)漢字。這一定價(jià)較GPT-3.5模型便宜90%。 “Turbo就是加速的意思,它的反應(yīng)速度是要比ChatGPT要快很多的。從底層算力上看,其實(shí)沒(méi)有發(fā)生太大的變化。但成本降低、反應(yīng)速度提高,這只能說(shuō)明一件事,就是GPT-3.5Turbo模型實(shí)際使用的參數(shù)相比ChatGPT下降了?!眲⑻旖苷f(shuō)道。 他隨即向每經(jīng)記者解釋?zhuān)氨热缯f(shuō),你有1750億個(gè)參數(shù),但是你喂給它的訓(xùn)練集很小,也訓(xùn)練不出效果,會(huì)導(dǎo)致大量的問(wèn)題,我們稱(chēng)其為過(guò)擬合。所以,參數(shù)大意味著訓(xùn)練集要足夠大。但是,參數(shù)越大并不意味著模型的表現(xiàn)越好,越能理解人的語(yǔ)義。恰恰相反的是,現(xiàn)在大家都想用更少的參數(shù)訓(xùn)練出一個(gè)更好的大模型?!? 為什么GPT-3.5Turbo能在更小的參數(shù)上實(shí)現(xiàn)更好的效果呢?“實(shí)際上,ChatGPT已經(jīng)積累了大量用戶(hù)使用的實(shí)際對(duì)話(huà)集,這些對(duì)話(huà)集相比OpenAI使用無(wú)監(jiān)督訓(xùn)練的語(yǔ)義集,要更準(zhǔn)確、更高質(zhì)量?!眲⑻旖苷f(shuō)道,“因?yàn)椋脩?hù)實(shí)際使用的對(duì)話(huà)中有上下文、有反饋,收集這些數(shù)據(jù)后再去訓(xùn)練模型,新的模型就會(huì)比之前更精確,就達(dá)到了用更小的參數(shù)量實(shí)現(xiàn)更準(zhǔn)確的效果。 在劉天杰看來(lái),GPT-3.5Turbo成本的下降,核心的一點(diǎn)就是實(shí)際計(jì)算的成本確實(shí)比之前要低,因?yàn)樗哪P透鼫?zhǔn)了。 “當(dāng)然,一方面也因?yàn)镺penAI本身不是一個(gè)盈利機(jī)構(gòu),并且它也需要更多的用戶(hù)參與進(jìn)來(lái),去形成這種實(shí)際的對(duì)話(huà)集,再輸入模型中做進(jìn)一步的訓(xùn)練,而低價(jià)也會(huì)導(dǎo)致用戶(hù)量進(jìn)一步的增長(zhǎng)。”他說(shuō)道。 劉天杰表示,這就是所謂的“AI飛輪”。“用戶(hù)提高了,數(shù)據(jù)變多了,模型更準(zhǔn)了,用戶(hù)自然更多了。飛輪一旦跑起來(lái),OpenAI就能甩掉其他對(duì)手,這也是它低價(jià)策略的一個(gè)原因?!? ChatGPT浪潮重構(gòu)互聯(lián)網(wǎng)生態(tài),三類(lèi)創(chuàng)業(yè)機(jī)會(huì)涌現(xiàn) 隨著ChatGPTAPI的開(kāi)放,調(diào)用這個(gè)接口來(lái)實(shí)現(xiàn)AI賦能成為許多創(chuàng)業(yè)公司的追求,這種熱潮不免讓人想起元宇宙、Web3等新概念引領(lǐng)的風(fēng)潮。許多人會(huì)問(wèn),看看兩年前扎克伯格看好的元宇宙如今在哪兒,未來(lái)ChatGPT又會(huì)在哪兒?不過(guò),在劉天杰看來(lái),這一波興起的AI浪潮與前一段時(shí)間的元宇宙、Web3有本質(zhì)上的區(qū)別。 “元宇宙、Web3是一個(gè)分布式的東西。在這里,大家希望互聯(lián)網(wǎng)信息或者經(jīng)濟(jì)系統(tǒng),都用一個(gè)分布式、加密式的方式去重構(gòu)?!彼颉睹咳战?jīng)濟(jì)新聞》記者說(shuō)道,“但當(dāng)前這一波AI浪潮恰恰相反,它會(huì)變成一個(gè)非常集中的東西,未來(lái)AI的底層能力將由有基礎(chǔ)預(yù)訓(xùn)練大模型能力的幾個(gè)大廠提供,其他人就在這些底層大模型上去開(kāi)發(fā)應(yīng)用?!? “所以說(shuō),整個(gè)互聯(lián)網(wǎng)的生態(tài)我認(rèn)為是重構(gòu)了。這有點(diǎn)類(lèi)似于當(dāng)年的云服務(wù),由幾個(gè)大廠來(lái)做云服務(wù)廠商,在云之上,你們?nèi)ラ_(kāi)發(fā)各種各樣的應(yīng)用。”劉天杰進(jìn)一步說(shuō)道。 在ChatGPT引領(lǐng)的這一波AI浪潮中,劉天杰看到了三大層次的創(chuàng)業(yè)機(jī)會(huì)。第一類(lèi)是做中文的底層大模型?!斑@類(lèi)創(chuàng)業(yè)者往往都是高校出來(lái)的,比如說(shuō)清華系有一大堆人在做底層大模型。但任重而道遠(yuǎn),訓(xùn)練底層大模型,一是非常燒錢(qián),二是要有足夠強(qiáng)的算力?!彼嬖V每經(jīng)記者。 圖片來(lái)源:視覺(jué)中國(guó) “另外,小公司收集訓(xùn)練集的能力不夠,而大模型的‘大’,大在它的訓(xùn)練集。小公司并沒(méi)有積累大量的數(shù)據(jù)?!彼f(shuō)道。 第二類(lèi)是中間層,比如做模型的微調(diào)、預(yù)訓(xùn)練;或者在底層大模型的基礎(chǔ)上訓(xùn)練新模型,比如虛擬人模型?!斑@些模型是基于底層大模型的語(yǔ)義能力,然后在這個(gè)能力之上加了各種限制條件?!彼f(shuō)道,這里有一些創(chuàng)業(yè)機(jī)會(huì),但并不算多。 第三類(lèi)是應(yīng)用層,這也是大多數(shù)創(chuàng)業(yè)公司正在探究的道路?!澳壳白钪苯拥氖巧蓤D片、文字、視頻甚至3D內(nèi)容。但是這些相對(duì)來(lái)說(shuō)壁壘不夠,因?yàn)槟P鸵膊皇悄愕?,?xùn)練集也不是你的,無(wú)非就是做一點(diǎn)優(yōu)化的工作?!眲⑻旖苷f(shuō)道。 “當(dāng)然還有更前沿的,就是科學(xué)家團(tuán)隊(duì)在探索真正的終局——通用智能,但這一塊現(xiàn)在還在一個(gè)非常早期的階段?!彼蛎拷?jīng)記者介紹道。 泥沙俱下,用戶(hù)需求才是創(chuàng)業(yè)的根本 在劉天杰的預(yù)想中,ChatGPT引領(lǐng)的這條路子是很清楚的,他看重的就是未來(lái)更多各行各業(yè)能夠去做AI賦能的應(yīng)用,比如SaaS、RPA(機(jī)器人流程自動(dòng)化),甚至是機(jī)器人。 他現(xiàn)在主要關(guān)注兩大板塊,一是AI生成3D資產(chǎn)?!耙?yàn)檫@一塊有真正會(huì)掏錢(qián)的客戶(hù)——游戲公司。這一塊是他們的痛點(diǎn),因?yàn)橹谱?D內(nèi)容非常昂貴,如果能用AI制作3D內(nèi)容,是他們求之不得的。但目前大模型的能力還解決不了3D的生成,這是一個(gè)我們會(huì)重點(diǎn)關(guān)注的領(lǐng)域?!? 二是文字轉(zhuǎn)換動(dòng)作的應(yīng)用?!耙簿褪钦f(shuō),我用AI指揮實(shí)體的東西去執(zhí)行操作,比如說(shuō)機(jī)器人、RPA(機(jī)器人流程自動(dòng)化)、全局的智能助手等。這一塊涉及到大模型的多模態(tài)輸出和輸入,是一個(gè)相對(duì)來(lái)說(shuō)比較前沿的領(lǐng)域,也是大模型沒(méi)有完全解決的領(lǐng)域?!眲⑻旖芙忉尩?。 市場(chǎng)太熱,到底哪些才是靠譜的項(xiàng)目?對(duì)此,一些投資人直言“又興奮又焦慮”。 不過(guò),劉天杰還沒(méi)到焦慮的地步,他直言,“我們看了太多這種新技術(shù)、新概念的例子,第一波(沖在前面的)有很多蹭熱度的。從經(jīng)典的蓋特納創(chuàng)業(yè)模型來(lái)看,新技術(shù)都會(huì)先經(jīng)歷這樣的事情,后面真正能使用這個(gè)技術(shù)的人才會(huì)崛起?!? 他向《每日經(jīng)濟(jì)新聞》記者透露,很多很強(qiáng)的創(chuàng)業(yè)者,例如傳統(tǒng)大廠里面職位非常高的人,或者在科學(xué)界有頭有臉的人,也都被吸引入場(chǎng)?!皣?guó)內(nèi)比如說(shuō)美團(tuán)的王慧文、快手CTO以及某電商大廠技術(shù)負(fù)責(zé)人?!? 據(jù)劉天杰介紹,某電商大廠技術(shù)負(fù)責(zé)人提出了Transformer大模型中一個(gè)關(guān)鍵的技術(shù)路線(xiàn),叫做多頭注意力機(jī)制?!澳嗌尘阆?,當(dāng)然有大量蹭熱度的,但是也有很多很強(qiáng)的創(chuàng)業(yè)者在開(kāi)始干這件事?!彼f(shuō)道。 ChatGPT身后的藍(lán)海讓許多創(chuàng)業(yè)公司蜂擁而至。在劉天杰看來(lái),“現(xiàn)在許多所謂的AIGC項(xiàng)目,并非這一波預(yù)訓(xùn)練大模型(ChatGPT)之后產(chǎn)生的,它的技術(shù)路線(xiàn)上其實(shí)跟大模型沒(méi)有任何關(guān)系,相當(dāng)于之前傳統(tǒng)范式的AI上,包了一層AIGC的殼,就非說(shuō)自己是大模型,但實(shí)際上跟大模型沒(méi)什么關(guān)系?!? 他認(rèn)為,能夠落地的應(yīng)用需要?jiǎng)?chuàng)業(yè)者在對(duì)應(yīng)的細(xì)分產(chǎn)業(yè)中做實(shí)。“你要理解產(chǎn)業(yè)本身的經(jīng)濟(jì)機(jī)制和運(yùn)行規(guī)則,以及用戶(hù)需求,尤其用戶(hù)需求永遠(yuǎn)是最重要的。因?yàn)樵谶@里,AI只是提供效率的工具,它類(lèi)似一個(gè)乘數(shù)。你必須得有前面的‘1’,也就是真實(shí)的客戶(hù)和客戶(hù)需求?!?
人工智能 AIGC ChatGPT 元宇宙

歡迎關(guān)注每日經(jīng)濟(jì)新聞APP

每經(jīng)經(jīng)濟(jì)新聞官方APP

0

0