ChatGPT：AIGC現(xiàn)象級應(yīng)用，商業(yè)化落地打開成長空間

• 劉春天 2023年2月24日 來源：中研網(wǎng) 1196 77
• 繁體

ChatGPT：AIGC現(xiàn)象級應(yīng)用，商業(yè)化落地打開成長空間ChatGPT上線后熱度持續(xù)提升，已超過TikTok成為活躍用戶增長最快的產(chǎn)品。英偉達(dá)CEO黃仁勛表示“ChatGPT相當(dāng)于AI界的iPhone問世”。目前ChatGPT已開啟商業(yè)化探索，面向B端開放接口對外輸出服務(wù)（如與微軟Bing的結(jié)合）；面

根據(jù)《2023-2028年中國ChatGPT行業(yè)發(fā)展前景及投資風(fēng)險預(yù)測分析報告》分析，ChatGPT是AIGC領(lǐng)域現(xiàn)象級應(yīng)用。ChatGPT是美國AI公司OpenAI于2022年11月30日發(fā)布的通用型對話系統(tǒng)，可以通過模擬對話的形式完成編程、問答、文本生成等任務(wù)。ChatGPT的持續(xù)火熱，成為AIGC領(lǐng)域現(xiàn)象級應(yīng)用，為后續(xù)商業(yè)化和應(yīng)用落地打開廣闊空間，也為以自然語言處理為核心的認(rèn)知智能技術(shù)提供廣闊發(fā)展機(jī)遇。英偉達(dá)CEO黃仁勛表示“ChatGPT相當(dāng)于AI界的iPhone問世”。

ChatGPT在多項測試中超過人類。2022年，包括ChatGPT在內(nèi)的許多大模型的測試表現(xiàn)已經(jīng)超出人類。目前ChatGPT已經(jīng)通過SAT考試、商學(xué)院考試、美國律師資格、注冊會計師、醫(yī)師資格等高難度考試，IQ測試達(dá)83，已經(jīng)具備取代無意義重復(fù)性工作的能力，在專業(yè)領(lǐng)域也具有輔助決策的潛力。

ChatGPT上線后熱度持續(xù)提升，已超過TikTok成為活躍用戶增長最快的產(chǎn)品。ChatGPT發(fā)布一周用戶數(shù)就突破100萬人，月訪問量達(dá)2100萬人次。目前ChatGPT尚未披露具體的日活用戶數(shù)，根據(jù)ARK數(shù)據(jù)，截至2023年1月，預(yù)計ChatGPT全球日活用戶超過1000萬人。

ChatGPT商業(yè)化已經(jīng)落地，未來成長空間廣闊。面向B端，ChatGPT可以開放接口對外輸出服務(wù)，如與微軟Bing的結(jié)合；面向C端，2023年2月，ChatGPT已推出收費的Plus版本，月度費用為20美元/月,并表示未來或?qū)⑻剿鲀r格更低的訂閱方案、2B的商業(yè)方案以及數(shù)據(jù)包等選項。根據(jù)OpenAI預(yù)測，2023年將實現(xiàn)收入2億美元，2024年將超過10億美元，未來成長空間廣闊。

ChatGPT是以Transformer為基礎(chǔ)的預(yù)訓(xùn)練模型。GPT的全稱為GenerativePre-TrainedTransformer，即生成式預(yù)訓(xùn)練Transfomer模型。預(yù)訓(xùn)練模型是指通過挖掘利用大規(guī)模無標(biāo)注數(shù)據(jù)，學(xué)習(xí)數(shù)據(jù)中的知識與規(guī)律，然后針對特定任務(wù)，通過微調(diào)、手工調(diào)參等階段，進(jìn)入到可以大規(guī)模、可復(fù)制的大工業(yè)落地階段。Transformer模型來自谷歌2017年發(fā)表的論文《Attentionisallyouneed》，是一種采用自注意力機(jī)制的深度學(xué)習(xí)模型，模型按照輸入數(shù)據(jù)各部分的重要性的不同而分配不同的權(quán)重。Transformer的優(yōu)勢在于：（1）采用并行訓(xùn)練，大幅提高了訓(xùn)練效率；（2）在分析預(yù)測更長的文本時,對間隔較長的語義具有更好的關(guān)聯(lián)效果。

GPT大模型經(jīng)過多次迭代，參數(shù)量大幅提升。谷歌發(fā)表Transformer論文后的第二年（即2018年），OpenAI推出基于Transformer的第一代GPT模型，隨后陸續(xù)推出GPT-2、GPT-3、InstructGPT等版本，GPT模型持續(xù)迭代。OpenAI于2020年5月推出第三代GPT-3模型，參數(shù)量達(dá)1750億，較上一代GPT-2（參數(shù)量15億）提升了兩個數(shù)量級，是微軟同年2月推出的T-NLG模型（參數(shù)量170億）的10倍，成為當(dāng)時最大的預(yù)訓(xùn)練語言模型。
GPT-3系列已經(jīng)發(fā)展出50多種模型。GPT-3模型推出后，已陸續(xù)發(fā)展出面向不同場景的模型。除ChatGPT外，GPT-3系列中比較流行的還有CodeX（代碼生成）、DALL-E（圖片生成）等。CodeX經(jīng)過自然語言和幾十億行代碼的訓(xùn)練，可以完成Python、JavaScript等十幾種語言的代碼任務(wù)。DALL-E于2021年5月推出，可以根據(jù)文字描述生成圖像和藝術(shù)作品，收費價格為0.016-0.020美元/圖。

ChatGPT由GPT-3微調(diào)而來，模型更小，專注于聊天場景。對比來看，GPT-3是一種大型通用語言模型，可以處理各種語言處理任務(wù)，ChatGPT是一個較小的專用模型，專為聊天應(yīng)用程序設(shè)計。ChatGPT訓(xùn)練包括三個步驟：（1）預(yù)訓(xùn)練一個語言模型(LM)；（2）聚合問答數(shù)據(jù)并訓(xùn)練一個獎勵模型(RewardModel，RM)；（3）用強(qiáng)化學(xué)習(xí)(RL)方式微調(diào)LM。此外，因為引入了代碼作為訓(xùn)練語料，ChatGPT還額外產(chǎn)生了自動寫代碼和理解代碼的能力。

ChatGPT通過RLHF優(yōu)化訓(xùn)練結(jié)果。ChatGPT基于人類反饋強(qiáng)化學(xué)習(xí)（RLHF），通過眾包團(tuán)隊大規(guī)模開展生成結(jié)果好壞的人工標(biāo)注，經(jīng)過多次迭代，使得大模型生成結(jié)果更加無偏見和符合人類預(yù)期，實現(xiàn)了“智慧涌現(xiàn)”的效果。
InstructGPT相比GPT-3：

更符合人類偏好。InstructGPT是在GPT-3微調(diào)而來，經(jīng)過人類反饋強(qiáng)化學(xué)習(xí)后，InstructGPT相比GPT-3，在71%-88%的情況下更符合人類偏好。

真實性顯著提升。在TruthfulQA測試中，InstructGPT生成真實信息的頻率較GPT-3提升約一倍（0.413vs0.224）。

在生成有毒信息方面略有改善。在RealToxicity測試中，InstructGPT生成有毒信息的情況（包含仇恨、歧視或謠言的信息）較GPT-3略有改善（0.196vs0.233）。

預(yù)訓(xùn)練大模型：GPT大模型是ChatGPT的基礎(chǔ)，目前已經(jīng)過多個版本迭代，GPT-3版本參數(shù)量達(dá)1750億，訓(xùn)練效果持續(xù)優(yōu)化。（2）數(shù)據(jù)：數(shù)據(jù)是預(yù)訓(xùn)練大模型的原材料。GPT-3數(shù)據(jù)主要來自CommonCrawl、新聞、帖子、書籍及各種網(wǎng)頁，原始數(shù)據(jù)規(guī)模達(dá)45TB，訓(xùn)練效果大幅提升。（3）算力：微軟AzureAI是OpenAI獨家云計算供應(yīng)商，所用超算擁有285,000個CPU內(nèi)核、約10,000個GPU。在大模型、大數(shù)據(jù)和高算力的支撐下，ChatGPT技術(shù)持續(xù)突破，表現(xiàn)驚艷。

巨頭積極布局，產(chǎn)業(yè)落地加速AIGC在AI技術(shù)創(chuàng)新（生成算法、預(yù)訓(xùn)練模型、多模態(tài)技術(shù)等）、產(chǎn)業(yè)生態(tài)（三層生態(tài)體系雛形已現(xiàn)）和政策支持（北京經(jīng)信局表示支持頭部企業(yè)打造對標(biāo)ChatGPT的大模型）共振下，有望步入發(fā)展快車道，根據(jù)騰訊研究院發(fā)布的AIGC發(fā)展趨勢報告，預(yù)計2030年AIGC市場規(guī)模將達(dá)1100億美元，前景廣闊。

微軟：微軟自2019年與OpenAI展開合作，并表示未來所有產(chǎn)品將全線整合ChatGPT。目前已推出引入ChatGPT技術(shù)的搜索引擎NewBing，經(jīng)過測試后，71%的用戶對ChatGPT版Bing滿意，AI與搜索協(xié)同效果顯著。

谷歌：2023年2月谷歌推出對標(biāo)ChatGPT的對話機(jī)器人Bard。Bard基于谷歌LaMDA模型，參數(shù)量最高達(dá)1370億，LaMDA已經(jīng)在多個維度接近人類水平。谷歌表示未來會將AI技術(shù)率先應(yīng)用于搜索領(lǐng)域，或?qū)⑴c微軟展開正面競爭。

百度：百度在AI領(lǐng)域深耕數(shù)十年，在芯片、深度學(xué)習(xí)框架、大模型以及應(yīng)用已形成全棧布局，已有文心一格（AI作畫）、文心百中（產(chǎn)業(yè)搜索）產(chǎn)品落地。2023年2月，百度推出聊天機(jī)器人“文心一言”，目前生態(tài)合作伙伴近300家，未來可期。

• 相關(guān)深度報告REPORTS

  

  2023-2028年中國ChatGPT行業(yè)發(fā)展前景及投資風(fēng)險預(yù)測分析報告

  ChatGPT，美國“開放人工智能研究中心”研發(fā)的聊天機(jī)器人程序，于2022年11月30日發(fā)布。是人工智能技術(shù)驅(qū)動的自然語言處理工具，它能夠通過學(xué)習(xí)和理解人類的語言來進(jìn)行對話，還能根據(jù)聊天的上下C...

  查看詳情

延伸閱讀

推薦閱讀

猜您喜歡