ChatGPT需要多少算力支持?
據(jù)中信建投研報數(shù)據(jù),此前用于AI訓練的算力增長符合摩爾定律,大約每20個月翻一番;深度學習的出現(xiàn)加速了性能的擴展,用于AI訓練的算力大約每6個月翻一番;而目前大規(guī)模模型出現(xiàn),其訓練算力是原來的10到100倍。
“算力、算法、數(shù)據(jù)作為人工智能的三要素,在數(shù)字經(jīng)濟發(fā)展、產(chǎn)業(yè)智能化升級的進程中發(fā)揮巨大作用,數(shù)據(jù)可以看作生產(chǎn)資料,算法代表新的生產(chǎn)關系,算力則是新型生產(chǎn)力支撐著算法和數(shù)據(jù),算力水平?jīng)Q定數(shù)據(jù)處理能力的強弱。在AI模型訓練和推理運算過程中需要強大的算力支撐,隨著訓練強度和運算復雜程度的增加,算力精度的要求也在逐漸提高?!辟惖项檰柸斯ぶ悄墚a(chǎn)業(yè)研究中心常務副總經(jīng)理鄒德寶稱。
根據(jù)國家數(shù)據(jù)資源調(diào)查報告,2021年全球數(shù)據(jù)總產(chǎn)量67ZB,近三年平均增速超過26%?;A算力、智能算力、超算算力都呈現(xiàn)穩(wěn)定增長態(tài)勢。
根據(jù)早些時候OpenAI發(fā)表了一份研究成果表明,AI訓練所需算力指數(shù)增長,增長速度超越硬件的摩爾定律。
其實ChatGPT需要的算力取決于應用場景,一般來說,GPT需要大量的算力來完成復雜的任務。例如,在自然語言處理任務中,GPT需要大量的算力來處理大量的文本數(shù)據(jù),以及處理復雜的語義關系。此外,GPT還需要大量的算力來處理復雜的圖像和視頻數(shù)據(jù)。
數(shù)據(jù)顯示,自2012年至2018年,用于訓練AI所需要的算力大約每隔3~4個月翻倍,整體呈現(xiàn)指數(shù)級上漲(而摩爾定律僅僅是18個月翻一倍)1。從2012年到2018年,訓練AI所耗費的算力增長了30萬倍,而摩爾定律在相同時間只有7倍的增長。
ChatGPT熱度不減的背后,是人工智能內(nèi)容自動生成技術所需要的算力需求也水漲船高。數(shù)據(jù)顯示,ChatGPT的總算力消耗約為3640PF-days(即假如每秒計算一千萬億次,需要計算3640天),需要7~8個投資規(guī)模30億、算力500P的數(shù)據(jù)中心才能支撐運行。
中國的算力情況正在迅速發(fā)展。根據(jù)最新的數(shù)據(jù),中國的計算機算力已經(jīng)超過美國,成為全球最大的計算機算力擁有國。中國的算力發(fā)展受到政府的大力支持,政府投入了大量資金用于研發(fā)新技術,推動算力的發(fā)展。此外,中國的科技公司也在積極投資算力,以滿足市場需求。
ChatGPT大火面臨的挑戰(zhàn)
自ChatGPT發(fā)布以來,它的能力也不斷被人們解鎖,但人們在試用中慢慢發(fā)現(xiàn),數(shù)學能力是ChatGPT的一大短板,連簡單的“雞兔同籠”題都能算錯。大概是考慮到這一點,ChatGPT近日宣布了一次重要更新:提升了真實性和數(shù)學能力。
據(jù)了解,ChatGPT較上一代產(chǎn)品提升明顯,對話模式具備更好的交互體驗。但對比Google等搜索引擎,ChatGPT尚不具備替代搜索引擎的能力。ChatGPT的數(shù)據(jù)來自訓練數(shù)據(jù)庫,目前數(shù)據(jù)庫僅更新至2021年,可用信息有限,同時真實性也無法得到保障。
主要來自于大量的文本數(shù)據(jù),包括新聞文章、社交媒體帖子、書籍等。這些文本數(shù)據(jù)可以幫助ChatGPT學習語言,從而更好地理解人類語言。此外,從商業(yè)模式來看,ChatGPT目前采用免費的模式。
根據(jù)OpenAI的CEO SamAltman披露,ChatGPT每次聊天成本約為幾美分,其中一部分來自Azure云服務,未來公司在持續(xù)優(yōu)化成本的同時,會考慮通過收費獲利,預計的收費模式包括訂閱制、按條收費等。
文章綜合選股寶、第一財經(jīng)、中國科技網(wǎng)
-
摩爾定律
+關注
關注
4文章
640瀏覽量
80507 -
算力
+關注
關注
2文章
1350瀏覽量
16516 -
OpenAI
+關注
關注
9文章
1235瀏覽量
9730 -
ChatGPT
+關注
關注
30文章
1595瀏覽量
9990
發(fā)布評論請先 登錄
OpenAI調(diào)整策略:ChatGPT審查或放寬
OpenAI嘗試減少對ChatGPT的審查
ChatGPT Plus 2025新功能搶先看:如何訂閱與使用全攻略
OpenAI免費開放ChatGPT搜索功能
OpenAI更新macOS ChatGPT應用,推出“代理”功能實現(xiàn)無縫集成
OpenAI桌面版ChatGPT新增應用協(xié)作功能
ChatGPT深度融入蘋果Mac軟件生態(tài)
ChatGPT新增實時搜索與高級語音功能
大聯(lián)大推出基于MediaTek Genio 130與ChatGPT的AI語音助理方案
OpenAI發(fā)布滿血版ChatGPT Pro
OpenAI推出Windows桌面版ChatGPT應用

ChatGPT需要多少算力支持? ChatGPT面臨的挑戰(zhàn)
評論