首頁|必讀|視頻|專訪|運(yùn)營(yíng)|制造|監(jiān)管|大數(shù)據(jù)|物聯(lián)網(wǎng)|量子|元宇宙|博客|特約記者
手機(jī)|互聯(lián)網(wǎng)|IT|5G|光通信|人工智能|云計(jì)算|芯片報(bào)告|智慧城市|移動(dòng)互聯(lián)網(wǎng)|會(huì)展
首頁 >> 芯片 >> 正文

分析師稱ChatGPT每天運(yùn)行開銷達(dá)70萬美元,微軟開發(fā)自主芯片嘗試降低成本

2023年4月21日 09:46  新浪科技  

北京時(shí)間 4 月 21 日早間消息,據(jù)報(bào)道,芯片行業(yè)研究公司 SemiAnalysis 首席分析師迪倫 帕特爾(Dylan Patel)表示,由于 ChatGPT 運(yùn)行在價(jià)格昂貴的計(jì)算基礎(chǔ)設(shè)施之上,OpenAI 每天為運(yùn)行 ChatGPT 投入的成本可能高達(dá) 70 萬美元(當(dāng)前約 481.6 萬元人民幣)。

帕特爾指出,ChatGPT 需要龐大的算力,才能基于用戶的輸入信息做出反饋,包括撰寫求職信、生成教學(xué)計(jì)劃,以及幫助用戶優(yōu)化個(gè)人資料等。他表示:“大部分成本都來自于昂貴的服務(wù)器。”

此外,帕特爾最初的估計(jì)基于 OpenAI 的 GPT-3 模型,而在采用最新的 GPT-4 模型之后,ChatGPT 現(xiàn)在的運(yùn)行成本可能更高。

對(duì)此,OpenAI 尚未對(duì)此做出回應(yīng)。

帕特爾和 SemiAnalysis 的另一位分析師阿夫扎爾 艾哈邁德(Afzal Ahmad)表示,此前外界已經(jīng)注意到,訓(xùn)練 ChatGPT 背后的大語言模型可能要花費(fèi)上億美元,但運(yùn)營(yíng)費(fèi)用,或者說人工智能推理的成本,以任何合理的部署規(guī)模來看都遠(yuǎn)遠(yuǎn)超過了訓(xùn)練成本。他們指出:“事實(shí)上,按周來看,ChatGPT 的推理成本超過了訓(xùn)練成本!

過去幾年,使用 OpenAI 語言模型的公司也一直在承擔(dān)高昂的價(jià)格。創(chuàng)業(yè)公司 Latitude 開發(fā)了一款基于用戶輸入信息生成故事情節(jié)的人工智能地下城游戲。該公司首席執(zhí)行官尼克 沃爾頓(Nick Walton)表示,運(yùn)行該模型,以及相應(yīng)的購買亞馬遜 AWS 云服務(wù)器的費(fèi)用 2021 年達(dá)到每月 20 萬美元(當(dāng)前約 137.6 萬元人民幣)。因此,沃爾頓最終決定改用 AI21 Labs 支持的語言軟件提供商。這幫助他將公司的人工智能成本降低了一半,至每月 10 萬美元(當(dāng)前約 68.8 萬元人民幣)。

沃爾頓在接受采訪時(shí)表示:“我們會(huì)開玩笑說,我們有人類員工和人工智能員工,在這兩類員工身上花費(fèi)的成本大致相同。我們每個(gè)月在人工智能上花掉數(shù)十萬美元,而且我們也不是一家大型初創(chuàng)公司,所以這是一筆巨大的開支!

近期有報(bào)道稱,為了降低生成式人工智能模型的運(yùn)行成本,微軟正在開發(fā)一款代號(hào)為“雅典娜”的人工智能芯片。該項(xiàng)目于 2019 年啟動(dòng)。在此幾年前,微軟與 OpenAI 達(dá)成了 10 億美元的投資協(xié)議,要求 OpenAI 僅在微軟的 Azure 云服務(wù)器上運(yùn)行其模型。

微軟啟動(dòng)這一芯片項(xiàng)目的背后有兩方面思考。知情人士透露,微軟高管意識(shí)到,他們?cè)谧灾餍酒_發(fā)方面落后于谷歌和亞馬遜。與此同時(shí),微軟正在尋找更便宜的方案去替代英偉達(dá)的 GPU 芯片。

目前,微軟大約有 300 多名員工正在開發(fā)這款芯片。消息人士稱,該芯片最早可能在明年發(fā)布,供微軟和 OpenAI 內(nèi)部使用。微軟拒絕對(duì)此消息置評(píng)。

編 輯:章芳
聲明:刊載本文目的在于傳播更多行業(yè)信息,本站只提供參考并不構(gòu)成任何投資及應(yīng)用建議。如網(wǎng)站內(nèi)容涉及作品版權(quán)和其它問題,請(qǐng)?jiān)?0日內(nèi)與本網(wǎng)聯(lián)系,我們將在第一時(shí)間刪除內(nèi)容。本站聯(lián)系電話為86-010-87765777,郵件后綴為#cctime.com,冒充本站員工以任何其他聯(lián)系方式,進(jìn)行的“內(nèi)容核實(shí)”、“商務(wù)聯(lián)系”等行為,均不能代表本站。本站擁有對(duì)此聲明的最終解釋權(quán)。
相關(guān)新聞              
 
人物
工信部張?jiān)泼鳎捍蟛糠謬?guó)家新劃分了中頻段6G頻譜資源
精彩專題
專題丨“汛”速出動(dòng) 共筑信息保障堤壩
2023MWC上海世界移動(dòng)通信大會(huì)
中國(guó)5G商用四周年
2023年中國(guó)國(guó)際信息通信展覽會(huì)
CCTIME推薦
關(guān)于我們 | 廣告報(bào)價(jià) | 聯(lián)系我們 | 隱私聲明 | 本站地圖
CCTIME飛象網(wǎng) CopyRight © 2007-2024 By CCTIME.COM
京ICP備08004280號(hào)-1  電信與信息服務(wù)業(yè)務(wù)經(jīng)營(yíng)許可證080234號(hào) 京公網(wǎng)安備110105000771號(hào)
公司名稱: 北京飛象互動(dòng)文化傳媒有限公司
未經(jīng)書面許可,禁止轉(zhuǎn)載、摘編、復(fù)制、鏡像