12月30日消息(南山)近日,幻方量化旗下的DeepSeek公司宣布發(fā)布全新系列模型DeepSeek-V3首個版本,并同步開源。
DeepSeek-V3為自研MoE模型,671B參數(shù),激活37B,在14.8T token上進行了預訓練。
DeepSeek引用評測報告指出,DeepSeek-V3多項評測成績超越了阿里旗下Qwen2.5-72B和Meta旗下Llama-3.1-405B等其他開源模型,并在性能上和世界頂尖的閉源模型GPT-4o以及Claude-3.5-Sonnet不分伯仲。
令業(yè)界震驚的是,DeepSeek-V3訓練僅花費了557.6萬美元,在2048xH800集群上運行55天完成,還很坦誠地公布了技術細節(jié)。
相比之下,GPT-4o這樣的模型訓練成本約為1億美元。
這一成果已經(jīng)引起海外注意。其中,OpenAI創(chuàng)始成員Karpathy點評稱,DeepSeek-V3讓在有限算力預算上進行模型預訓練這件事變得容易。它看起來比Llama 3 405B更強,訓練消耗的算力卻僅為后者的1/11。
這意味著算力成本的大幅下降,也意味著大模型領域在經(jīng)歷了“百模大戰(zhàn)”后,可能會迎來新一輪的大模型產(chǎn)品競爭。
- 紅魔七周年力作:紅魔10 Air定義輕薄電競,售價2999元起
- AI基礎設施簡介:液體冷卻使AI基礎設施升溫
- 數(shù)據(jù)的力量:房地產(chǎn)游戲規(guī)則改變者
- 人工智能驅動的預測分析:利用數(shù)據(jù)智能改變酒店業(yè)
- 如何利用AI提升可持續(xù)數(shù)據(jù)中心的能源效率?
- 中國鐵塔2025年微型數(shù)字直放站集采:中信科移動蟬聯(lián)第一
- 企業(yè)網(wǎng)絡的未來:企業(yè)如何構建可擴展且安全的網(wǎng)絡
- 國家統(tǒng)計局:人工智能、量子科技等技術帶動高技術產(chǎn)業(yè)發(fā)展
- 為不同網(wǎng)絡設備確定適當交換機端口配置的關鍵因素
- 如何在工業(yè)自動化中利用 AI 的力量?| 產(chǎn)品分享
免責聲明:本網(wǎng)站內容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準確性及可靠性,但不保證有關資料的準確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負責。本網(wǎng)站對有關資料所引致的錯誤、不確或遺漏,概不負任何法律責任。任何單位或個人認為本網(wǎng)站中的網(wǎng)頁或鏈接內容可能涉嫌侵犯其知識產(chǎn)權或存在不實內容時,應及時向本網(wǎng)站提出書面權利通知或不實情況說明,并提供身份證明、權屬證明及詳細侵權或不實情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關文章源頭核實,溝通刪除相關內容或斷開相關鏈接。