AI Infra公司在宣布接入DeepSeek-R1后,,會有很多中小企業(yè)前來聯(lián)系,,希望獲得部署了R1模型的產(chǎn)品,清程極智就遇到了類似情形,。
“你們的DeepSeek是不是‘滿血版’,?”清程極智CEO湯雄超曾被客戶這么問,。
注:DeepSeek滿血版即DeepSeek-R1模型的頂級版本,模型參數(shù)達(dá)671B(6710億),,是普通版(14B/32B)的20倍以上,,滿血版支持本地/API部署及復(fù)雜科研計算,能力上限更高,,且對硬件要求也更高,。
收到太多此類問詢后,清程極智團(tuán)隊決定用工程解決這個問題——在官網(wǎng)上線一個“滿血版”鑒別小程序,,并精心挑選了幾道比較有區(qū)分度的題目,,用戶可以用這些題目去提問,如果系統(tǒng)回答得對,,基本上就是“滿血版”,;如果回答不出來,,可能就不是“滿血版”。
該小程序上線后,,其訪問量超出了清程極智的預(yù)期,。
實(shí)際上,清程極智的經(jīng)歷只是近期AI行業(yè)的一個縮影,。
“整個AI行業(yè)這一個多月應(yīng)該都過得很充實(shí),。”有業(yè)內(nèi)人士表示,。DeepSeek的火爆,,讓整個AI賽道的從業(yè)人員處于一種“痛并快樂著”的狀態(tài)。
一方面,,DeepSeek的出現(xiàn)激發(fā)了普通用戶使用AI工具的意識和需求,推動了AI的普及,。DeepSeek也成為有史以來增速最快的AI應(yīng)用,,據(jù)AI產(chǎn)品榜統(tǒng)計,DeepSeek 2月份活躍用戶1.57億,,已接近ChatGPT 7.49億的20%,。過多用戶的涌入,也讓DeepSeek對話機(jī)器人常常陷入“服務(wù)器繁忙”的狀態(tài),。
另一方面,,DeepSeek的快速迭代和開源,讓本來就“卷”的AI行業(yè)進(jìn)入了新一輪的“軍備競賽”,,從模型層至應(yīng)用層的很多公司,,在今年春節(jié)期間幾乎沒有休息。眾多企業(yè)宣布接入DeepSeek,,既有云服務(wù)提供商,、芯片制造商等B端公司,也有各類C端應(yīng)用公司,。據(jù)正和島統(tǒng)計,,已有超200家企業(yè)完成DeepSeek技術(shù)接口的集成部署。
接入的企業(yè)也迎來了一波“潑天流量”——騰訊元寶APP在接入DeepSeek之后,,下載量迅速攀升,,并在3月3日登頂中國區(qū)蘋果應(yīng)用商店免費(fèi)APP下載排行榜TOP1;作為AI基礎(chǔ)設(shè)施公司,,硅基流動在全網(wǎng)最快接入DeepSeek-R1,,訪問量激增40倍,2月訪問量高達(dá)1719萬人次,。
DeepSeek-R1的出現(xiàn),,也進(jìn)一步提高了各方對AIGC應(yīng)用加速發(fā)展的期待,。
當(dāng)3月6日Monica.im發(fā)布AI智能體產(chǎn)品Manus時,再次引發(fā)了一場“邀請碼搶購”狂潮,。
無論是各大模型廠商還是AI產(chǎn)業(yè)鏈上下游的公司,,都在興奮地等待通往未來AI世界的關(guān)鍵路徑。
早在2024年DeepSeek-V2模型發(fā)布時,,業(yè)內(nèi)已經(jīng)關(guān)注到這家公司及旗下的開源模型,。
美圖設(shè)計室技術(shù)負(fù)責(zé)人郭晨暉表示,為了在美圖的AI應(yīng)用場景中給用戶更好的效果體驗(yàn),,在自研的基礎(chǔ)上,,美圖也一直對國內(nèi)外優(yōu)秀的大模型保持關(guān)注。DeepSeek-V2發(fā)布時,,美圖的外采AI團(tuán)隊就關(guān)注到了該模型,,與DeepSeek團(tuán)隊接觸嘗試合作。不過為了尋求穩(wěn)定性,,美圖當(dāng)時主要通過第三方AI Infra服務(wù)商調(diào)用DeepSeek模型API,。2024年9月,美圖設(shè)計室接入了V2模型,,輔助文案擴(kuò)寫,,V3、R1模型發(fā)布后,,他們也陸續(xù)進(jìn)行了更新,。“我們產(chǎn)品和業(yè)務(wù)團(tuán)隊看到一些適合結(jié)合的模型,,就會去做效果評估,,合適的可能就會引入到我們自己的應(yīng)用場景里?!惫繒熣f,。
郭晨暉來源:受訪者
DeepSeek官方提供了兩個接入方法,,一是模型跑起來后,,通過一些編程方式去調(diào)用它的API接口;二是用戶在手機(jī)上裝一個APP或打開官網(wǎng)的聊天窗口,,直接跟它對話,,聊天窗口的背后就在調(diào)用API。
不過,,由于目前DeepSeek的流量過高,,又存在服務(wù)器、人手不足等情況,導(dǎo)致DeepSeek自己的API會出現(xiàn)超時等問題,。郭晨暉表示,,美圖旗下產(chǎn)品有著大體量的用戶基數(shù),一些功能推廣開來后流量可能會激增數(shù)十倍,、上百倍,,這種情況下,公有云的服務(wù)保障能力相對更強(qiáng),。
不僅如此,,DeepSeek的模型比較大,尤其是“滿血版”模型對硬件有一定要求,;基于性價比層面的考慮,,美圖的業(yè)務(wù)場景存在很顯著的(使用)高峰、低峰效應(yīng),,云廠商可以抹平各家調(diào)用API高低峰期的差異,。“如果我們自己進(jìn)行部署,,低峰期資源利用率可能比較低,,會有比較大的資源浪費(fèi)?!惫繒熣f,。
因此,,美圖目前接入DeepSeek-R1模型的方式,,主要是調(diào)用云廠商的API,在此基礎(chǔ)上進(jìn)行一定的私有化部署,。
與美圖類似,,部署端側(cè)芯片的此芯科技,也一直對新發(fā)布的各種大模型保持關(guān)注,,尤其是比較適合在端側(cè)進(jìn)行本地化部署的模型,。此芯科技生態(tài)戰(zhàn)略總經(jīng)理周杰表示,對于一些開源的大模型,,尤其是SOTA模型(State of the Art,,在某一領(lǐng)域或任務(wù)中表現(xiàn)最佳的模型),他們會第一時間投入資源進(jìn)行相應(yīng)的異構(gòu)適配,。因此在DeepSeek去年發(fā)布V2以及今年發(fā)布R1后,,此芯科技都第一時間嘗試適配這些模型。
在周杰看來,,DeepSeek-V2模型的主要創(chuàng)新點(diǎn)有兩個,,一是通過MLA(多頭潛在注意力)架構(gòu)有效地降低了KV緩存(Transformer模型在自回歸解碼過程中使用的一種優(yōu)化技術(shù))的開銷,因?yàn)榇笳Z言模型對于內(nèi)存帶寬和容量的要求很高,一旦能夠降低KV緩存,,可以給算力平臺帶來很大幫助,;二是DeepSeek發(fā)布的MoE(混合專家)模型,對傳統(tǒng)MoE架構(gòu)進(jìn)行了優(yōu)化改造,,這個架構(gòu)可以讓一個(參數(shù))更大的模型在資源有限的情況下被使用,。
當(dāng)時,此芯科技很快適配了V2模型的light版本,,即16B大小的模型,。“雖然16B參數(shù)看起來也很大,,但實(shí)際運(yùn)行時,,它只會激活2.4B參數(shù)。我們覺得這樣的模型非常適合在端側(cè)運(yùn)行,,此芯科技的P1芯片也可以給2.4B參數(shù)規(guī)模的模型提供比較好的支持,。”周杰告訴《中國企業(yè)家》,。
周杰來源:受訪者
對于此芯科技如何“接入”DeepSeek,周杰解釋道:“用戶現(xiàn)在使用DeepSeek等應(yīng)用,,很多需要調(diào)用云端的算力,,相當(dāng)于DeepSeek自己的數(shù)據(jù)中心或云廠商,提供了一些API給終端側(cè)應(yīng)用調(diào)用,,用戶使用DeepSeek APP時,,就可以調(diào)用云端的AI能力。但是部分端側(cè)場景可能對數(shù)據(jù)隱私等方面有很高的要求,,這種情況下就需要在本地進(jìn)行運(yùn)算,,在端側(cè)部署后,用戶可以在斷網(wǎng)的情況下運(yùn)行DeepSeek等模型,?!?/p>
從算力和系統(tǒng)層面滿足了運(yùn)行一個大語言模型的基本要求后,此芯科技就可以結(jié)合客戶項(xiàng)目的實(shí)際需求,,跟DeepSeek等模型廠商進(jìn)行商業(yè)化合作,,對模型進(jìn)行微調(diào)優(yōu)化,把具體項(xiàng)目落地,。
V2推出后,,清程極智內(nèi)部也嘗試接入該模型,但當(dāng)時的市場需求較少,,他們就沒有推廣使用,。今年R1出來后,他們覺得這是一個非常好的機(jī)會,決定接入DeepSeek并大規(guī)模向客戶推廣,。
清程極智是做系統(tǒng)軟件的,,對外基于系統(tǒng)軟件提供推理服務(wù),因此不是像部分應(yīng)用公司那樣直接接入DeepSeek的API,,而是為客戶提供一套專屬的DeepSeek的API用于應(yīng)用服務(wù),。“我們接入的方式是把DeepSeek的開源模型下載下來,,在我們的算力系統(tǒng)上用系統(tǒng)軟件把服務(wù)部署起來,。”湯雄超說,。
通俗來講,,R1模型是一個幾百G大小的文件,但下載后無法直接使用,。
“它只是一個文件,,不是一個可用的服務(wù),我們要做的是把這個模型運(yùn)行起來,,讓它去對外提供服務(wù)的接口,。通過API的服務(wù)接口,用戶就可以跟模型進(jìn)行對話了,?!睖鄢忉尩馈?/p>
基于前期技術(shù)積累,,清程極智在把模型文件下載下來后,,一天內(nèi)就迭代出了第一個版本,隨后針對R1模型結(jié)構(gòu)進(jìn)行了優(yōu)化,,正式“滿血版”官宣上線只用了一周,。
在湯雄超看來,,技術(shù)環(huán)節(jié)的工作都比較順利,,接入DeepSeek后,更多的挑戰(zhàn)來自于商務(wù)側(cè)或市場側(cè),。具體來說,,DeepSeek的流量給公司帶來了非常多來咨詢的客戶,但每個客戶的需求都不太一樣,?!鞍ㄋ懔ζ脚_、芯片型號,、服務(wù)器規(guī)格等都不一樣,,我們需要針對不同的算力等基礎(chǔ),做針對性的調(diào)優(yōu)?!睖鄢f,。
在2024年5月發(fā)布V2模型后,因其極致性價比,,DeepSeek獲得“AI界拼多多”的稱號,,并帶動國內(nèi)大廠打起了大模型價格戰(zhàn)。
價格戰(zhàn)降低了API費(fèi)用,。以美圖“AI商品圖”為例,,在郭晨暉看來,一方面,,美圖在AI圖像處理上擁有強(qiáng)大技術(shù)優(yōu)勢,,而DeepSeek模型的接入帶來了用戶體驗(yàn)和轉(zhuǎn)化的正向反饋,且大語言模型API的調(diào)用成本占比很低,,這與美圖的業(yè)務(wù)場景形成了很好的優(yōu)勢互補(bǔ),,因此美圖也會加大對大語言模型應(yīng)用的關(guān)注。
2月9日,,DeepSeek停止了V3模型為期45天的優(yōu)惠價格體驗(yàn)期,,API恢復(fù)原價,每百萬輸入tokens 0.5元(緩存命中)/2元(緩存未命中),,每百萬輸出tokens 8元,。R1的百萬tokens輸入價格(緩存命中)為1元,百萬tokens輸入價格(緩存未命中)為4元,,輸出價格為16元,。
但OpenAI官網(wǎng)顯示,GPT-4o的2.5美元/百萬輸入tokens,,10美元/百萬輸出tokens,;最新發(fā)布的GPT-4.5的百萬輸入/輸出tokens更是高達(dá)75美元/150美元,僅較GPT-4o就上漲了15~30倍,。
在郭晨暉看來,,一方面DeepSeek模型調(diào)用費(fèi)用在美圖AI研投的整體成本占比不高;另一方面,,DeepSeek恢復(fù)原價后依然處于比較便宜的價格區(qū)間,,且美圖接入DeepSeek后,在用戶轉(zhuǎn)化及反饋上是正向的,,因此他們會加大在大語言模型方面的投入,。
周杰也認(rèn)為,DeepSeek的API價格比OpenAI低了很多倍,,對于企業(yè)和用戶而言,,買token的費(fèi)用大大降低,。在端側(cè)模型層面,現(xiàn)在一個3B的模型可能就能做到以前7B以上規(guī)模的模型效果,,內(nèi)存等成本也相對降低了,。
“這是個軟硬件協(xié)同的過程。同樣的硬件條件下,,現(xiàn)在相當(dāng)于能實(shí)現(xiàn)以前更大參數(shù)規(guī)模的模型效果,,或者要達(dá)到同樣的模型效果,對硬件的要求變低了,?!敝芙苷f。
3月初,,持續(xù)五天的“DeepSeek開源周”結(jié)束后,,DeepSeek團(tuán)隊首次對外公布了模型的優(yōu)化技術(shù)細(xì)節(jié)、成本利潤率等關(guān)鍵信息,。按DeepSeek測算,,其成本利潤率理論上能達(dá)到545%。
大模型成本的快速降低以及能力的提升,,也帶來了to B和to C領(lǐng)域用戶的高速增長,。
湯雄超透露,現(xiàn)在有很多的中小企業(yè)會主動聯(lián)系到他們,,希望獲得基于R1模型的產(chǎn)品,。
百度創(chuàng)始人、董事長兼CEO李彥宏在《緊抓AI智能體爆發(fā)元年機(jī)遇,,推動新質(zhì)生產(chǎn)力加快發(fā)展》一文中寫道,,大模型的推理成本,每12個月就降低90%以上,,遠(yuǎn)超“摩爾定律”,。隨著大模型技術(shù)的迭代和成本的直線下降,人工智能應(yīng)用將大爆發(fā),。
目前,,AI市場處于高速增長階段,湯雄超認(rèn)為,,DeepSeek的理論利潤率高達(dá)545%,,對于整個行業(yè)的意義和影響非常積極,,給市場科普了算力系統(tǒng)軟件的重要性,。
湯雄超來源:受訪者
“過去大家并不是非常重視軟件的能力,,DeepSeek讓大家認(rèn)識到,,花錢買軟件不是浪費(fèi)錢,,而是為了更好地省錢?!睖鄢硎?,在受過教育的市場環(huán)境下,核心系統(tǒng)軟件的優(yōu)勢能被更大地發(fā)揮出來,;短期來看,,DeepSeek的開源也能讓各方降低產(chǎn)品交付的商業(yè)成本。
隨著越來越多企業(yè)接入DeepSeek,,在其開源生態(tài)上做“建設(shè)”反饋,,DeepSeek的發(fā)展進(jìn)程也在加速。
郭晨暉認(rèn)為,,這也是DeepSeek的開源生態(tài)最大的優(yōu)勢——接入的企業(yè)在各自應(yīng)用場景上打造差異化能力產(chǎn)品的同時,,應(yīng)用場景也能推動DeepSeek等基座大模型的發(fā)展?!案骷夜驹陂_源生態(tài)的差異化部署不僅能加速AI的創(chuàng)新,,大模型的低成本化也有助于大模型在垂直細(xì)分領(lǐng)域的可用性,給AI的應(yīng)用帶來更大的想象空間,?!惫繒熣f。
在周杰看來,,除了云端應(yīng)用爆發(fā)外,,在DeepSeek的推動下,端側(cè)AI應(yīng)用也會在2025年實(shí)現(xiàn)井噴式發(fā)展,。
“未來的AI其實(shí)是一個混合式的人工智能,,不是所有的東西都在云端跑,也不是所有東西都在端側(cè)跑,,因?yàn)楦饔懈鞯膬?yōu)勢,。如端側(cè)只能跑相對小規(guī)模參數(shù)的模型,但對于某些任務(wù)來說,,對精度有更高要求,,還是要用云端算力;而為了保證數(shù)據(jù)安全和隱私,,就需要使用端側(cè)能力實(shí)現(xiàn)以前更大參數(shù)規(guī)模的模型效果,,這就形成一個混合式的部署方案?!敝芙苷f,,此芯科技也在跟云廠商進(jìn)行這方面的應(yīng)用探索。
“AI應(yīng)用元年”已經(jīng)不是一個新概念,,但截至目前,,AI行業(yè)從業(yè)者以及投資人,,還在尋找更適合AI應(yīng)用的落地場景。在周杰看來,,這只是時間問題,,“一個新生態(tài)的發(fā)展肯定需要一定時間,所有的東西不會突然完善,,需要軟件和硬件不斷迭代,。目前來看,芯片側(cè),、模型側(cè)等已經(jīng)為AI的大規(guī)模應(yīng)用打下了堅實(shí)的基礎(chǔ),,后面需要更多的開發(fā)者來開發(fā)AI應(yīng)用,滿足實(shí)際的場景需求,?!?/p>
對公眾而言,需理性看待AI技術(shù),,不要盲目相信所謂的“AI預(yù)測彩票”,。在科技日新月異的今天,AI似乎成了無所不能的“神器”
2025-02-14 09:10:09用DeepSeek買彩票聰明反被聰明誤