國產(chǎn)自主14nm工藝!云天勵飛發(fā)布深目AI模盒:比GPU便宜90%
3月31日消息,近日,中國AI企業(yè)云天勵飛正式發(fā)布了平民化的大模型產(chǎn)品——“深目”AI模盒。
本文引用地址:http://butianyuan.cn/article/202404/457052.htm它的售價只要千元級,但可以做到“三個90%”——覆蓋場景超過90%、算法精度超過90%,使用成本降低90%,可以讓更多中小企業(yè)用上大模型。
“深目”AI模盒的算力基礎(chǔ),是其去年推出的大模型訓(xùn)推芯片“DeepEdge10 Max”。
該芯片采用了自主可控的14nm國產(chǎn)工藝、D2D chiplet晶粒架構(gòu),基于同樣國產(chǎn)的RISC-V內(nèi)核,并采用異構(gòu)多核設(shè)計。
它支持大模型訓(xùn)練推理部署,已適配并可承載10億級參數(shù)的SAM、百億級參數(shù)的Llama2等大模型運(yùn)算,可廣泛應(yīng)用于AIoT邊緣視頻、移動機(jī)器人等場景。
云天勵飛還自主研發(fā)了多模態(tài)大模型“云天天書”,包含語言大模型、多模態(tài)大模型等不同系列,在C-Eval、CMMLU等權(quán)威測試中多次獲得第一,并于去年正式通過中央網(wǎng)信辦備案。
云天天書1.0版本發(fā)布于2023年初,至今已迭代3個版本。
以云天天書為底座,云天勵飛可與合作伙伴首先完成預(yù)訓(xùn)練場景算法,再提供給中小企業(yè)用戶,由其根據(jù)自身場景需求,在邊緣端完成算法微調(diào),并且在線學(xué)習(xí)、優(yōu)化算法,不斷提升算法精度。
“深目”AI模盒首發(fā)標(biāo)準(zhǔn)版搭載云天天書3.5V版本,INT8整數(shù)算力48TOPS(48萬億次)。
今年下半年,“深目”AI模盒將推出輕量版,芯片為DeepEdge10Pro,搭配云天天書4.0V,算力減半至24TOPS。
明年上半年,“深目”AI模盒將升級為旗艦版,芯片也升級為DeepEdge10Ultra,繼續(xù)搭配云天天書4.0V,算力翻番到96TOPS。
云天勵飛成立于2014年,并在當(dāng)年推出了基于CV小模型的AI產(chǎn)品“深目”1.0,陸續(xù)在警務(wù)、城市治理、智慧交通、人居生活等領(lǐng)域打造多個標(biāo)桿項目。
評論