移動操作軟件與運作——第08章:模擬 [KR]
模擬為移動操作系統提供虛擬環境,讓開發者在實際部署前評估機械人硬件、控制軟件、感知算法及運作流程。Gazebo、NVIDIA Isaac Sim、MuJoCo 和 Webots 提供不同模擬功能,MiL、SiL、HiL 測試及合成數據生成亦可支援系統驗證和 AI 開發。模擬與現實的差距可透過域隨機化、系統識別、參數校準及逐步實體驗證處理。
模擬為移動操作系統提供虛擬環境,讓開發者在實際部署前評估機械人硬件、控制軟件、感知算法及運作流程。Gazebo、NVIDIA Isaac Sim、MuJoCo 和 Webots 提供不同模擬功能,MiL、SiL、HiL 測試及合成數據生成亦可支援系統驗證和 AI 開發。模擬與現實的差距可透過域隨機化、系統識別、參數校準及逐步實體驗證處理。
數碼孿生把移動操作機械人的平台、機械臂、感測器、控制軟件和工作空間整合為虛擬環境,並透過運作數據持續反映實體系統狀態。它可用於評估感知與操作、生成合成數據、優化運作策略及重現故障,並可整合 ROS 2、MoveIt 2、NVIDIA Isaac Sim、Gazebo 和 MuJoCo。
本章闡述移動操作系統中的多機械人協調,涵蓋系統架構、通訊,以及中央集權式、分散式和混合式協調方式。內容亦涉及工作分配、協作操作、共享工作空間管理、擴展性、容錯與安全,並列出評估系統效能的指標。
車隊管理系統協調多台移動操作機械人,監督任務執行及共享資源,讓機械人共同支援工業工作流程。系統涵蓋任務分配與排程、資源和電池管理、交通協調、狀態監測及營運分析。AI、數學優化與預測分析可用於估算任務時間、預測擠塞及建議資源分配,但須受安全要求和確定性備用機制約束。
地平線機器人實驗室發布原生影片幾何基礎模型 LoFT,可從 RGB 影片聯合預測相機位姿、內參及逐幀深度,重建場景三維結構。訓練數據包括約 297 萬條有效序列及 9.62 億幀圖像記錄;在 SpatialBench、ClassicBench 和 VRBench 評測中,LoFT 多項深度估計指標達到 SoTA。
地平線機器人實驗室發佈原生視頻幾何基礎模型 LoFT,面向連續視頻建模,可從 RGB 視頻聯合預測相機位姿、內參及逐幀深度,恢復三維場景結構。模型採用雙循環 Transformer 架構,訓練數據集約有 297 萬條序列、9.62 億幀圖像。LoFT 在 SpatialBench 等三大評測體系中的多項深度估計指標達業界最優(SoTA),適用於機器人感知、自動駕駛及室內環境重建等場景。
地平線機器人實驗室發布原生影片幾何基礎模型 LoFT,可從 RGB 影片聯合預測相機位姿、內參及逐幀深度,以恢復場景三維結構。LoFT 在 SpatialBench、ClassicBench 和 VRBench 評測中與 VGGT-Ω、DA3-Giant 等模型比較,並在多項深度估計指標上達到 SoTA。該模型面向連續影片建模,可用於機器人空間感知、環境理解與具身學習。
比利時健康科技初創公司 IntelliProve 完成 €2.7 million 種子融資,計劃把面部掃描健康檢查由虛擬醫療應用拓展至人形機械人。其軟件以 30 秒面部掃描讀取心率、心率變異度、呼吸及血壓,使用標準鏡頭即可,無需血壓袖帶;公司表示,相關技術已整合至 50 多個國家的應用程式。融資將用於監管工作、研究及商業拓展,包括機械人部署。
MIT研究人員展示一款1.29克撲翼微型機器人,利用機載感測與計算懸停、跟隨軌跡及降落,毋須外部動作捕捉系統。《Science Robotics》論文報告,系統結合多種感測器、估算器和低層控制器,位置精度達釐米級;一次30秒測試中,機器人避開障礙並降落在向日葵上。飛行由操作員透過搖桿提供高層位置指令,機器人仍由外部供電;研究團隊正研發加入相機和電池,以支援自主物件辨識、避障及無繫留戶外飛行。
MIT研究團隊研製出一款搭載機載感測器與運算元件的拍翼微型飛行機械人,可在沒有動作捕捉系統的環境中沿複雜軌跡飛行,並精準降落在向日葵上。研究團隊將軟致動器尺寸增加50%,令機械人的淨升力提高46%,並達到1.9的升力重量比;電子套件重244毫克。示範仍使用外接電源,團隊正研究加入相機及整合電源電子元件與電池,以實現無繫留戶外飛行。
研究提出 State-Aware Fallback Imitation(SAFI),教導視覺語言動作(VLA)模型在執行途中停止被禁止的行為,並以適當的替代反應控制機械人的實際動作。
Physical AI 將感測器收集的工業數據交由 AI 分析並作出決策,再透過已批准的操作控制設備或機械人,並以回饋確認行動是否達成目標。文章介紹設備診斷與預測性維護、品質檢查、機械人、數碼孿生及互聯工業系統等應用,並指出安全邊界、測試、數據品質和網絡安全等工程考量。
GameRealm 是大型多模態遊戲資料集,收錄超過 120 million 個 RGB 影格及 1,000 hours 遊戲片段,並以同步標註將視覺觀察與遊戲中的監督訊號連結。資料集涵蓋深度、相機參數、音訊、控制輸入及 3D 點軌跡,並支援單視角、立體、多視角及全景錄製。實驗顯示,GameRealm 能提升視覺基礎模型在視覺生成及幾何學習任務上的表現。
NVIDIA Cosmos 探討如何用兩個提示詞建立適合訓練的 Physical AI 數據集。高質素且多元的訓練數據集有助提升世界模型的準確度,但捕捉罕見缺陷、夜間事故等具挑戰性的情境既昂貴又耗時。原始數據整理成可供訓練的數據集,還涉及篩選、標註、生成及評估等複雜流程。
BrightAI 融資 $97M,由 Smith Point Capital 領投,客戶 GE Vernova 亦有投資,使公司累計融資達 $184M。其產品包括可在裝置端運行 AI 的感測器、檢查機械人和協助技術員維修的穿戴式 AI 助理,服務能源、水務及工業場址。BrightAI 表示其平台已在超過 50,000 個站點運行,並計劃拓展歐洲和亞洲市場。
BrightAI 宣佈獲 Smith Point Capital 領投的 $97 million 融資,以擴大其 Physical AI 平台,累計融資達 $184 million。
Rockwell Automation 於 2026 年 11 月 18 日宣佈已簽署最終協議,收購奧地利自主移動機械人製造商 AGILOX,以擴大自主物料搬運能力並推進其實體 AI 策略。
Disney Experiences 宣佈,Walt Disney Imagineering R&D 與 AWS 建成由三個 Star Wars Audio-Animatronics 角色組成的原型,可即時選擇對白和動作,無須操偶師或固定表演流程。
Soracom 宣佈 Physical AI Suite 已在其服務的所有市場推出,整合機器人、自主機器及工業設備所需的連線、安全防護和遠端操作服務。用戶可透過 Soracom 主控台或 API 設定各項服務,毋須聘用專業服務團隊,並按各服務標準費率付費,不另收套裝費。Soracom 的流動核心網絡覆蓋超過200個國家及地區,連接超過500間電訊商。
工業和信息化部發布並實施5項人形機器人標準,涵蓋智能化能力評價、關鍵零部件及人形機器人訓練三大方向。標準包括電驅動一體化關節、靈巧手、訓練場構建、訓練數據管理和智能化能力分級,均自發布之日起實施。智能化能力分級以感知認知、決策學習、執行表現和協作交互四個維度建立L0至L5框架,訓練數據管理則覆蓋數據全生命週期。
三星電子計劃在 CES 2027 發布兩款人形機械人,分別命名為 HR(Human Reference)和 HE(Humanoid Extreme),定位入門及高階型號。兩款機械人均採象牙白配色、配備五指手部,並採用模擬人體肌腱的纜線驅動機制;HE 的關節自由度較高。 HR 面向大眾市場,適用於生活與工業場景。
Disney 與 AWS 合作開發具 AI 功能的《Star Wars》三個角色音響動畫人偶,預計於 11 月稍後在拉斯維加斯舉行的 Amazon re:Invent 亮相。
作者在 NVIDIA 上海辦公室觀看 RTX Spark 本地模型示範後,認為本地 AI 的價值不在取代雲端大模型,而是把 AI 帶進更多日常場景。示範中的開源機械人 Microduck 透過 Wi-Fi 把數據傳至 RTX Spark 筆記型電腦,由本地模型處理和整理,最終讓機械人動起來。作者將雲端大模型比作負責複雜問題與長鏈路推理的大腦,把本地小模型視為處理感知及瑣碎任務的神經末梢。
三星電子計劃於明年1月舉行的 CES 2027 發佈兩款人形機械人,分別為入門級 HR(Human Reference)及高階 HE(Humanoid Extreme)。HE 具備更多關節自由度,兩款機械人均採用象牙白配色、五指手部及模擬人體肌腱的纜線驅動機制。HR 面向大眾市場,可用於生活及工業場景;三星計劃以 HE 展示具身智能技術實力。
紐媧科技創辦人楊睿剛表示,自動駕駛的真實數據難以覆蓋所有長尾情況,機械人也會遇到相似問題,因此公司重視仿真、數據生成與數據增強。紐媧選擇社區末端配送,先處理定位、導航和避障,再逐步拓展至門禁、電梯及包裹交付等物理交互任務。WorldWeaver 組織真實場景數據、三維資產和生成數據,SimWeaver 提供物理仿真,相關體系用於 WTM 訓練和評測。
Humyn Labs 宣佈完成 $47 million 早期融資,以加快機械人在巴西、南韓和印度真實環境中的部署準備。Accel 領投 $26 million 股權融資,Lighthouse Canton 領投其餘 $21 million venture debt;資金將用於三地部署準備基建、硬件及 enrichment engine 開發。
弘暉基金董事總經理肖立認為,評估世界模型不應以單次成功演示為核心,而要看任務完成效率、失敗率及持續迭代後能力能否穩步提升。長程任務與開放場景中的泛化表現,是拉開差距的關鍵。
京東物流科技行業總經理陳佳表示,京東物流正把電商倉的自動化及營運經驗,適配到半導體倉儲物流,並以自研「狼族」機器人切入相關場景。自動包裝線每小時可處理200個lot以上,效率較傳統自動化高1.5倍以上,較人工約高6至8倍。京東物流目前主要聚焦貨物進倉後的存儲、揀選和包裝。
藍點觸控宣佈完成數億元人民幣D3輪融資,近半年融資額已超10億元。本輪由洪泰基金、中關村科學城等14家機構聯合投資,資金將用於新一代機器人力傳感器研發、擴產及全球化市場佈局。文中引述的市場報告稱,藍點觸控2025年在中國人形機器人六維力傳感器市場的份額超過80%。
清華大學徐夢迪指出,通用機械人不能只靠預訓練,還必須在部署中透過新資訊調整策略,以適應開放環境和多樣的人類指令。她的研究顯示,部署時使用驗證器挑選動作,性能提升速度比直接微調 Pi 0 快約 7 倍;以仿真補足人類影片缺少的觸覺資訊,也能提升靈巧操作能力。
楊睿剛創辦紐媧科技,選擇社區末端配送作為機械人創業方向,先解決移動與通行問題,再逐步拓展至更複雜任務。紐媧提出「具行智能」,圍繞世界通行模型(WTM)建立數據生成、物理仿真和模型訓練體系。
美團第四代索降無人機 M-Drone 4L 在迪拜完成海外首次亮相,當地索降航線將於近期投入使用,機型將服務 Sobha Hartland 等社區及戶外空間。該機型已在零下 20 攝氏度至 50 攝氏度、大雨及迪拜沙塵等條件下接受實測。美團無人機全球累計完成超 110 萬筆訂單。
智元合夥人王闖表示,人形機器人會説話、會走路只是及格線,會幹活才是真本事。智元與長隆共建的具身智能主題樂園今年 9 月開園,目前近 500 台機器人覆蓋 100 多個崗位,預計年底達 1000 台規模。
Toyota 宣佈將於2027年1月成立獨立機器人業務部門 Toyota Robotics,統籌工業、人形及服務護理機器人的研發與商業化。該部門將由執行役員兼首席生產官志賀武文兼任負責人,直接隸屬公司總部,並整合原生產本部、先進研發中心及 Woven 集團相關團隊。此舉將機器人業務提升至與電動化同等的戰略高度,目標是加快 AI 驅動的人形機器人技術落地,並複用汽車製造自動化經驗。
智元與長隆合作的具身智能主題樂園已於9月24日在珠海橫琴長隆飛船樂園開園。園區部署近500台人形機器人,覆蓋超過100個崗位,預計年底前達到1000台規模。王闖表示,人形機器人規模化落地的關鍵在於「會幹活」,而不只是具備基礎互動能力。
智元與長隆共建的具身智能主題樂園已部署近 500 台機械人,覆蓋 100 多個崗位。園區今年 9 月開園,預計年底達到 1000 台規模。王闖表示,會説話、會走路只是人形機械人的及格線,會幹活才是真本事。
慕華科創合夥人周天奇表示,人形機械人目前仍未迎來 ChatGPT 時刻。人形機械人賽道估值百億的公司頻出,但真機數據存在巨大鴻溝;他認為,仿真只是輔助,真實數據才是突圍核心,投資應看重商業化落地能力。
江西省創智未來科技創新產業引導基金公開徵集子基金管理機構,基金註冊資本為20億元,申報截止日期為2027年1月31日。申報基金總規模須不少於1億元,且投資於早期科技型企業的資金總額須達子基金實繳規模的70%。基金聚焦未來材料、未來能源、未來生物、未來健康、未來顯示及未來航空等方向。
智元AIMA城市行·香港站於香港城市大學舉行,活動以「AI機械人:如何感知與思考世界」為主題,吸引逾300人報名。活動包括主題分享、機械人互動體驗及AIMA工作坊,讓參與者瞭解具身智能並親手創作。工作坊透過靈心平台建立智能體並部署至實體機械人,亦可透過靈創平台創作動作及編排內容。
大灣區採購無人駕駛清掃車,可從具名案例、招標門檻和規模化營運三方面核驗廠商的落地能力。賽特智能在深圳市民中心廣場、廣州二沙島有落地案例,並在全國 100 多座城市投入營運。文章建議採購方核對現場作業點、設備檢測報告、封閉場地測試數據及智慧調度管理平台。