在機(jī)器人技術(shù)加速向真實(shí)世界滲透的當(dāng)下,行業(yè)正形成新的共識(shí):機(jī)器人要真正實(shí)現(xiàn)規(guī)模化應(yīng)用,不僅需要強(qiáng)大的算力與算法,更需要一套具備持續(xù)演進(jìn)能力、可量產(chǎn)且開放兼容的智能計(jì)算底座。隨著深度學(xué)習(xí)與Transformer架構(gòu)的引入,機(jī)器人系統(tǒng)復(fù)雜度呈指數(shù)級(jí)增長(zhǎng),傳統(tǒng)模塊化、靜態(tài)部署的架構(gòu)已難以適應(yīng)動(dòng)態(tài)環(huán)境需求。在此背景下,黑芝麻智能正式推出SesameX多維具身智能計(jì)算平臺(tái),旨在為產(chǎn)業(yè)伙伴提供從硬件到軟件、從感知到?jīng)Q策的全棧式解決方案,推動(dòng)機(jī)器人從“單點(diǎn)功能”向“長(zhǎng)期自主成長(zhǎng)”跨越。
平臺(tái)的核心創(chuàng)新之一是“全腦智能”理念。區(qū)別于單一超級(jí)模型,SesameX通過計(jì)算、系統(tǒng)與模型三層面協(xié)同實(shí)現(xiàn)多模態(tài)能力整合:在計(jì)算層,CPU、NPU、DSP與MCU等異構(gòu)算力單元統(tǒng)一調(diào)度,確保不同任務(wù)匹配最優(yōu)資源;在系統(tǒng)層,統(tǒng)一任務(wù)表達(dá)機(jī)制消除感知、規(guī)劃與控制間的數(shù)據(jù)孤島,形成連續(xù)信息流;在模型層,多模態(tài)模型與原子化能力組合支持跨算法體系協(xié)同。例如,在復(fù)雜服務(wù)場(chǎng)景中,機(jī)器人可同時(shí)處理視覺識(shí)別、語音交互與運(yùn)動(dòng)控制任務(wù),輸出穩(wěn)定一致的跨模態(tài)行為,而非碎片化響應(yīng)。
安全是機(jī)器人大規(guī)模應(yīng)用的前提。SesameX將安全理念貫穿平臺(tái)架構(gòu),構(gòu)建L0至L5六級(jí)安全體系,覆蓋從物理防護(hù)到數(shù)據(jù)安全的完整鏈條。L0層通過電機(jī)斷電、限位等機(jī)械保護(hù)確保極端情況下的物理安全;L1層由實(shí)時(shí)控制單元監(jiān)測(cè)運(yùn)動(dòng)狀態(tài),阻止不合理動(dòng)作;L2層在規(guī)劃層提供安全軌跡兜底;L3層約束高層策略意圖;L4層基于多模態(tài)感知實(shí)現(xiàn)100ms級(jí)危險(xiǎn)預(yù)測(cè);L5層通過本地推理、端到端加密與防火墻保護(hù)數(shù)據(jù)與模型完整性。這一體系使機(jī)器人在傳感器異常、模型輸出錯(cuò)誤或資源爭(zhēng)搶時(shí),可自動(dòng)進(jìn)入限速、重規(guī)劃或安全停機(jī)狀態(tài),為商業(yè)化部署提供系統(tǒng)級(jí)保障。
為解決機(jī)器人長(zhǎng)期運(yùn)行中的性能衰減問題,SesameX引入“閉環(huán)進(jìn)化”機(jī)制。平臺(tái)持續(xù)記錄感知穩(wěn)定性、推理延遲與任務(wù)成功率等關(guān)鍵指標(biāo),通過結(jié)構(gòu)化數(shù)據(jù)分析定位問題根源,例如感知模型對(duì)特定光照的適應(yīng)性或規(guī)劃策略在擁擠環(huán)境中的保守性。優(yōu)化階段,合作伙伴可選擇本地微調(diào)或云端再訓(xùn)練,平臺(tái)通過統(tǒng)一接口支持模型更新與策略回滾,并在受控條件下驗(yàn)證效果。這種漸進(jìn)式迭代使機(jī)器人能力隨部署規(guī)模擴(kuò)大持續(xù)提升,形成技術(shù)與應(yīng)用相互促進(jìn)的良性循環(huán)。
SesameX平臺(tái)提供從硬件模組到系統(tǒng)軟件的完整計(jì)算體系,包含計(jì)算平臺(tái)層、網(wǎng)絡(luò)層、操作系統(tǒng)層、中間件層、原子應(yīng)用層與系統(tǒng)安全層六大架構(gòu)。硬件層以自主研發(fā)的Kalos、Aura與Liora模組為核心,支持實(shí)時(shí)控制與大模型推理,緊湊設(shè)計(jì)適配移動(dòng)與操作類機(jī)器人;網(wǎng)絡(luò)層基于確定性以太網(wǎng)(TSN)與WiFi7/5G構(gòu)建實(shí)時(shí)協(xié)同體系,實(shí)現(xiàn)感知、算力與控制鏈路的確定性延遲保障;操作系統(tǒng)層兼容Ubuntu、ROS 2與自研RTOS,滿足通用開發(fā)與實(shí)時(shí)控制需求;中間件層通過調(diào)度引擎、工具鏈與Runtime實(shí)現(xiàn)跨模型與算力單元的協(xié)同;原子應(yīng)用層將復(fù)雜任務(wù)拆解為可復(fù)用的原子技能與模型,支持動(dòng)態(tài)行為編排;系統(tǒng)安全層則通過六級(jí)防護(hù)機(jī)制確保全生命周期安全。
這一高度一體化的架構(gòu)使SesameX成為機(jī)器人全棧智能底座,覆蓋從移動(dòng)到人形、從服務(wù)到工業(yè)的完整場(chǎng)景。平臺(tái)通過模塊化設(shè)計(jì)與統(tǒng)一接口降低系統(tǒng)集成復(fù)雜度,幫助合作伙伴快速完成功能調(diào)試與商業(yè)測(cè)試。例如,在商服場(chǎng)景中,機(jī)器人可基于原子模型庫動(dòng)態(tài)組合避障、跟隨與交互能力,適應(yīng)不同環(huán)境需求;在工業(yè)巡檢場(chǎng)景中,平臺(tái)支持多機(jī)器人集群協(xié)同,通過邊云互聯(lián)實(shí)現(xiàn)任務(wù)共享與實(shí)時(shí)數(shù)據(jù)交換。
黑芝麻智能表示,SesameX的目標(biāo)是構(gòu)建開放生態(tài),與整機(jī)廠商、算法公司及系統(tǒng)集成商共同推動(dòng)機(jī)器人技術(shù)落地。平臺(tái)已覆蓋不同復(fù)雜度的機(jī)器人需求,從低算力服務(wù)機(jī)器人到高算力人形機(jī)器人均可適配。通過提供可量產(chǎn)的硬件基礎(chǔ)、統(tǒng)一的軟件環(huán)境與持續(xù)進(jìn)化的能力,SesameX正助力機(jī)器人從“可演示”邁向“可信賴、可規(guī)模化”的新階段,為真實(shí)世界應(yīng)用提供系統(tǒng)級(jí)解決方案。











