初創(chuàng)企業(yè)Tiiny AI近日推出一款名為T(mén)iiny AI Pocket Lab的微型AI超級(jí)計(jì)算機(jī),憑借其突破性的硬件配置與技術(shù)創(chuàng)新引發(fā)行業(yè)關(guān)注。這款設(shè)備以14.2×8×2.53厘米的緊湊尺寸和300克重量,成為全球同類(lèi)產(chǎn)品中最輕便的解決方案,卻集成了ARMv9.2架構(gòu)的12核處理器與80GB LPDDR5X高速內(nèi)存,AI算力高達(dá)190 TOPS。
設(shè)備核心性能的突破性體現(xiàn)在其模型部署能力上。通過(guò)定制異構(gòu)計(jì)算架構(gòu)——將系統(tǒng)級(jí)芯片(SoC)與獨(dú)立神經(jīng)網(wǎng)絡(luò)處理器(NPU)深度整合,該設(shè)備首次實(shí)現(xiàn)本地運(yùn)行1200億參數(shù)級(jí)別的大型語(yǔ)言模型。這一成果得益于兩項(xiàng)關(guān)鍵技術(shù):TurboSparse神經(jīng)元級(jí)稀疏激活算法,可在保持模型完整性的前提下提升推理效率;PowerInfer開(kāi)源推理引擎則通過(guò)動(dòng)態(tài)任務(wù)分配機(jī)制,將計(jì)算負(fù)載在CPU與NPU間智能調(diào)度,使復(fù)雜LLM工作負(fù)載處理速度提升顯著。
硬件配置方面,設(shè)備配備1TB固態(tài)存儲(chǔ)空間與30W熱設(shè)計(jì)功耗(TDP),典型使用場(chǎng)景下系統(tǒng)功耗控制在65W左右。這種能效比設(shè)計(jì)使其在保持高性能的同時(shí),可適配移動(dòng)電源等便攜供電方案。80GB內(nèi)存容量支持激進(jìn)量化技術(shù)應(yīng)用,用戶無(wú)需犧牲模型精度即可在本地環(huán)境流暢運(yùn)行超大規(guī)模AI模型。
軟件生態(tài)構(gòu)建凸顯實(shí)用導(dǎo)向,設(shè)備支持GPT-OSS、Llama、Qwen、DeepSeek等數(shù)十種主流開(kāi)源模型的一鍵部署,覆蓋從學(xué)術(shù)研究到商業(yè)應(yīng)用的多樣化場(chǎng)景。其完全離線運(yùn)行能力突破云端依賴(lài)限制,在隱私保護(hù)要求嚴(yán)苛的醫(yī)療、金融等領(lǐng)域具有特殊價(jià)值。設(shè)備兼容的代理框架可實(shí)現(xiàn)多模型協(xié)同工作,滿足復(fù)雜任務(wù)處理需求。
該產(chǎn)品的工程實(shí)現(xiàn)面臨多重挑戰(zhàn)。研發(fā)團(tuán)隊(duì)通過(guò)三維堆疊技術(shù)優(yōu)化PCB布局,在有限空間內(nèi)集成高性能計(jì)算單元;采用相變散熱材料與微型液冷系統(tǒng)解決緊湊型設(shè)備的熱管理難題;定制操作系統(tǒng)則針對(duì)異構(gòu)計(jì)算架構(gòu)進(jìn)行深度優(yōu)化,確保軟硬件協(xié)同效率。這些技術(shù)創(chuàng)新使設(shè)備在保持手掌大小的同時(shí),達(dá)到專(zhuān)業(yè)級(jí)工作站性能標(biāo)準(zhǔn)。
據(jù)內(nèi)部人士透露,Tiiny AI計(jì)劃在CES 2026國(guó)際消費(fèi)電子展上正式展示該設(shè)備,屆時(shí)將開(kāi)放開(kāi)發(fā)者套件申請(qǐng)。行業(yè)分析師指出,這類(lèi)超便攜AI計(jì)算設(shè)備的出現(xiàn),可能推動(dòng)邊緣計(jì)算與端側(cè)AI應(yīng)用的范式轉(zhuǎn)變,特別是在需要實(shí)時(shí)處理與數(shù)據(jù)隱私保護(hù)的場(chǎng)景中,將催生新的商業(yè)模式與技術(shù)生態(tài)。















