---
title: "Stanford HomeBody：讓前沿視覺語言模型直接指揮人形機械人"
url: https://sammy.hk/stanford-homebody%ef%bc%9a%e8%ae%93%e5%89%8d%e6%b2%bf%e8%a6%96%e8%a6%ba%e8%aa%9e%e8%a8%80%e6%a8%a1%e5%9e%8b%e7%9b%b4%e6%8e%a5%e6%8c%87%e6%8f%ae%e4%ba%ba%e5%bd%a2%e6%a9%9f%e6%a2%b0%e4%ba%ba/
author: Ethan
published: 2026-09-28T16:43:00+08:00
modified: 2026-09-28T09:03:34+08:00
description: "Stanford 移動實驗室(TML)發表 HomeBody 系統，研究當前瞻視覺語言模型(如 Astra)能力日增之後，高層推理與機械人技能之間是否還需要一個學習得來、負責生成動作的視覺語言動作模型(VLA)。研究圖靈的答案，是讓 System 2 直接編排一組可重用的動作技能。 與常見架構的分別 論文指出，常見的人…"
categories: [AI]
tags: [Astra, HomeBody, Stanford, VLM, "人形機械人", "空間記憶"]
source: https://sammy.hk
---
![](https://sammy.hk/wp-content/uploads/2026/09/stanford-homebody-og.jpg)Stanford 移動實驗室(TML)發表 HomeBody 系統，研究當前瞻視覺語言模型(如 Astra)能力日增之後，高層推理與機械人技能之間是否還需要一個學習得來、負責生成動作的視覺語言動作模型(VLA)。研究圖靈的答案，是讓 System 2 直接編排一組可重用的動作技能。

## 與常見架構的分別

論文指出，常見的人形機械人自主架構分三層：System 2 的視覺語言模型處理視覺觀測與指令，System 1 的學習式 VLA 生成指令，System 0 的控制器執行協調動作。HomeBody 卻把這條鏈條插拔成可插拔的視覺語言模型，直接呼叫可組合的技能庫：觀測與執行結果會回饋給模型，讓它在動作或轉換失誤時修正下一個策略。

官方指出，HomeBody 為前瞻視覺語言模型配備持久空間記憶與可組合的人形技能，以處理長時程任務。在一個此前未見過的建房艱辛，由 GPT Astra 引導的 Unitree G1 可以清理整個房間的物件，並在資訊不足的請求下取回記憶中的物件，過程中毋須環境特定的諮詢資料或額外的策略學習。

## 長時程移動操作

論文指出，長時程的移動操作要求機械人超越自身視角所見：要跨房間行動，它需要一個內部空間模型，把可見物件與記憶中的位置連結，並協助解決含糊的請求。這些脈絡會引導它去哪艱辛、對物件行動，以及如何排序行動與操作。HomeBody 把講空間記憶與可組合技能結合，而技能的執行回饋令視覺語言模型可以在動作或轉換失誤時修正下一個策略。

官方展示兩個任務。第一個是整理建房：指令要求把咖啡袋收集起來放到中間、丟掉已變質的牛奶與橙汁紙盒；系統需要判斷保留與丟棄、以及每個物件該移到何處，並協調多次來回、抓取與放置。第二個任務是取藥：藥物起初不在視野之內，HomeBody 利用已存既的關門影格定位抓取，取回藥物交給使用者，之後再丟棄紙盒；它用右手抓住抓把手並打開，再用左手丟棄紙盒，顯示在同一任務中選擇左右手技能，以得到身體雙邊的目標。

## 部署方式

官方把部署分成三步。第一步是探索：先給預備人形機械人關於其角度的背景，讓它探索未見環境，收集 0.5 倍 iPhone 影片、D435i 相機觀測、配合 SLAM 的 LiDAR 掃描、關節姿態，以及由 Astra 選擇的路徑軌跡；探索以機械人自身視角記錄房間，令其空間脈絡建立在它移動與互動時所見之上，即使物件離開視野，系統仍保留那些脈絡。官方提供的探索指令為”You are a kitchen robot, please explore the space!”。\[1\]

第二步是 Real2Sim：HomeBody 以 Astra 作為其 Real2Sim 代理，利用人形機械人自身收集的資料，在 Isaac Sim 建立數碼分身；這把觀測鎖定於世界的空間模型，協助高層視覺語言模型對視野外位置的推理。\[1\]

第三步是給予日常任務：例如”整理建房”一類指令，HomeBody 會利用空間脈絡自行選擇動作與目標，而不需要動作層級的腳本。\[1\]

## 技能庫與架構

官方指出，導航、抓取、放置與開抓把構成 HomeBody 的動作詞庫。這些技能共享一個目標與執行結果介面，令視覺語言模型可以在部署時組合它們；系統架構把高層指令、可熱插拔的視覺語言模型(示範中記錄的是 Astra)、子任務進度與現在動作分解效現，並以模擬脈絡與當前 RGB 影像支援決策，再連接可擴展的技能庫執行實際動作。\[1\]

論文由 Gio Huh、Cayden Gu、Takara E. Truong、C. Karen Liu 與 Guy Tevet 撰寫，作者來自加州理工學院與史丹福大學，C. Karen Liu 與 Guy Tevet 為共同指導。\[1\]

## 參考資料

\[1\] [Stanford TML — HomeBody: A Humanoid That Explores, Remembers, and Acts on Its Own(2026 年 9 月)](https://tml.stanford.edu/homebody/)

### 相關文章：

1. [OpenAI 公開 Astra 細節：首個達「關鍵網絡安全門檻」的模型，能力驚人但限制更多](https://sammy.hk/openai-%e5%85%ac%e9%96%8b-astra-%e7%b4%b0%e7%af%80%ef%bc%9a%e9%a6%96%e5%80%8b%e9%81%94%e3%80%8c%e9%97%9c%e9%8d%b5%e7%b6%b2%e7%b5%a1%e5%ae%89%e5%85%a8%e9%96%80%e6%aa%bb%e3%80%8d%e7%9a%84%e6%a8%a1/ "OpenAI 公開 Astra 細節：首個達「關鍵網絡安全門檻」的模型，能力驚人但限制更多")
2. [OpenAI 暫停 Pro 訂閱註冊：Astra 需求遠超預期，基建承受前所未有壓力](https://sammy.hk/openai-%e6%9a%ab%e5%81%9c-pro-%e8%a8%82%e9%96%b1%e8%a8%bb%e5%86%8a%ef%bc%9aastra-%e9%9c%80%e6%b1%82%e9%81%a0%e8%b6%85%e9%a0%90%e6%9c%9f%ef%bc%8c%e5%9f%ba%e5%bb%ba%e6%89%bf%e5%8f%97%e5%89%8d%e6%89%80/ "OpenAI 暫停 Pro 訂閱註冊：Astra 需求遠超預期，基建承受前所未有壓力")
3. [未塗黑文件曝光：微軟高層私下形容 AI 爬取為「人類史上最大規模的盜取勞動」](https://sammy.hk/%e6%9c%aa%e5%a1%97%e9%bb%91%e6%96%87%e4%bb%b6%e6%9b%9d%e5%85%89%ef%bc%9a%e5%be%ae%e8%bb%9f%e9%ab%98%e5%b1%a4%e7%a7%81%e4%b8%8b%e5%bd%a2%e5%ae%b9-ai-%e7%88%ac%e5%8f%96%e7%82%ba%e3%80%8c%e4%ba%ba/ "未塗黑文件曝光：微軟高層私下形容 AI 爬取為「人類史上最大規模的盜取勞動」")
4. [AI 安全討論「走火入魔」：一邊講自我複製程式碼，一邊話「低估咗 AI」](https://sammy.hk/ai-%e5%ae%89%e5%85%a8%e8%a8%8e%e8%ab%96%e3%80%8c%e8%b5%b0%e7%81%ab%e5%85%a5%e9%ad%94%e3%80%8d%ef%bc%9a%e4%b8%80%e9%82%8a%e8%ac%9b%e8%87%aa%e6%88%91%e8%a4%87%e8%a3%bd%e7%a8%8b%e5%bc%8f%e7%a2%bc/ "AI 安全討論「走火入魔」：一邊講自我複製程式碼，一邊話「低估咗 AI」")