亚洲黄色片在线观看_日韩精品视频中文在线观看_亚洲国产中文字幕在线观看_亚洲高清久久网

    Coding Agent把Loop Engineering帶火了,機器人的Loop還少了最關鍵一環

    2026-07-10 15:57:04 來源:投資界

    Loop Engineering火了。


    (資料圖片僅供參考)

    乍一聽,像是繼Harness Engineering之后,AI工程圈又造出的一個新黑話。但兩者關注點并不一樣:Harness Engineering更像是在給agent搭一套“運行外骨骼”,把工具、上下文、權限、狀態、驗證和可觀測性都組織起來;Loop Engineering關注的則是,這套外骨骼里那條能持續跑起來的閉環——AI如何執行、檢查、失敗、修正,再繼續推進任務。

    接到目標,拆任務,調工具,看輸出,跑驗證,發現錯了再改,改完繼續測,直到結果過關——這就是一個loop。過去,人坐在模型前面,一句一句問,一輪一輪改;現在,人開始退到系統外面,設計一條能自動運轉的閉環,把模型放進去,讓它在反饋里自己迭代。

    所以Loop Engineering火起來,表面看是agent工程方法變了,本質上是AI的角色變了:從一次性回答問題,變成持續性完成任務。

    Coding Agent為什么先跑通?

    一個很重要的原因,是coding agent先吃到了“反饋紅利”。

    在軟件世界里,AI最容易得到高質量反饋。代碼寫完能不能跑,測試過不過,編譯器報什么錯,CI卡在哪里,diff有沒有引入回歸,review評論說哪里不對,這些反饋天然清晰、密集、便宜,還能反復觸發。

    這和聊天完全不同。聊天里,用戶說“不太對”,模型未必知道哪里錯了。但寫代碼時,錯誤會變成紅色日志、失敗用例、異常棧、類型檢查、性能指標。也就是說,軟件工程天然給agent提供了一套近乎理想的訓練場:動作可執行,結果可驗證,失敗可定位,修正可繼續。

    更關鍵的是,coding agent火了一段時間之后,真實人類數據也開始堆起來了。開發者會打斷agent、糾正agent、接受或拒絕agent的代碼、修改它生成的patch、在PR里留下意見。這些都不是靜態語料,而是“人在閉環里如何評價和修正AI工作”的過程數據。

    換句話說,coding agent的能力增強,并不只是模型本身更大了。它還吃到了一類軟件工程世界里非常奢侈的數據:人類反饋、機器驗證、多輪修正軌跡。

    這也解釋了為什么Loop Engineering會從coding agent語境里先冒出來。因為在代碼里,loop不是一個抽象愿景,而是每天都在發生的工程事實。AI寫,系統測,人類改,再讓AI繼續寫。一條閉環跑起來,模型就不再只是“會說”,而是開始“會試、會錯、會改”。

    但機器人沒有那么幸運

    把同樣的邏輯搬到具身智能,事情立刻變難。

    軟件里的反饋是日志,機器人里的反饋是真實世界。杯子有沒有滑落,夾爪有沒有打偏,力道是不是太大,手腕姿態是不是不對,視角有沒有被遮擋,桌面有沒有反光,物體有沒有發生滾動,環境有沒有突然變化——這些都不是一句error message能說清楚的。

    更麻煩的是,機器人要學會動作,先得有數據。過去行業最直接的辦法,是遙操作。人類操作員控制機器人完成任務,機器人記錄視覺、狀態和動作,最后拿這些軌跡訓練策略。

    這條路當然有價值。Open X-Embodiment、DROID這類大規模機器人數據集已經證明,多機器人、多任務、多場景數據確實能提高泛化能力。它們讓機器人學習第 一次有了類似“大數據預訓練”的味道。

    但遙操作天然有瓶頸。一個人通常一次只能控制一臺機器人。機器人硬件貴,場地貴,采集慢。操作員會疲勞,動作會變形。遠程控制有延遲,力反饋不完整,機械臂和人手的形態也不一致。

    更關鍵的是,遙操作數據記錄的是“機器人做了什么”,它并不天然記錄“人為什么這樣操作”。同樣是把杯子推正,人可能先看到了杯沿傾斜,再判斷重心,再減小力度,再用手腕微調。遙操作軌跡里能看到末端執行器怎么動,卻很難看到人類操作策略在腦子里是怎么形成的。

    所以,遙操作數據夠硬,但不夠像人。

    Ego數據補上了真實世界,但還沒補上反饋

    既然真機數據貴、遙操作慢,那能不能直接采人?

    這就是egocentric data,也就是第 一視角人類數據突然升溫的原因。人戴上頭顯、眼鏡或攝像設備,在真實環境里做家務、裝配、整理、烹飪、維修、工作,系統把人看到的畫面、手部動作、物體交互記錄下來。

    這類數據的優勢非常明顯:便宜、自然、規模大,而且覆蓋大量機器人短期內進不去的真實場景。從Ego4D到Ego-Exo4D,再到最近面向機器人學習的EgoLive、EgoScale、HumanEgo,行業方向越來越清楚:機器人不可能只靠機器人自己采數據,人類第 一視角數據會成為具身智能的重要補給線。

    但ego數據也有一個關鍵問題:它大多還是observe-first的。

    系統主要看到的是,人看到了什么,人手怎么動,任務有沒有完成。可真正的動作閉環,中間還有很多東西沒有被記錄下來:人什么時候鎖定目標?為什么伸向這個物體,而不是旁邊那個?動作發起前有沒有準備信號?過程中什么時候意識到偏差?力度是如何調小的?失敗后為什么切換策略?

    這些信息,只靠第 一視角視頻很難完整還原。視頻記錄了結果,卻沒有完整記錄反饋;視頻記錄了動作,卻沒有完整記錄意圖;視頻記錄了“人做了什么”,卻沒有完整記錄“人如何把事情做對”。

    這就是具身智能和coding agent最 大的差別。coding agent的loop里,反饋被寫進測試、日志和人類review;機器人學習的很多human data里,反饋卻還停留在畫面里,隱含在人類身體和大腦的控制過程中。

    AI看見了人類操作,卻沒有真正拿到人類閉環的運行日志。

    人類本身,就是最成熟的閉環系統

    人做動作,從來不是一條直線。

    不是看到杯子,然后直接伸手拿起。真實過程更像這樣:眼睛先掃描環境,視線鎖定目標;大腦結合任務上下文,形成意圖;神經系統把動作準備信號下發到身體;肌肉開始激活,手臂和手指進入執行。與此同時,視覺、本體感覺、觸覺和誤差信號不斷回流。

    如果杯子偏了,軌跡會變;如果抓得太輕,力道會加;如果手擋住視線,頭會調整角度;如果動作失敗,策略會切換。

    這就是人類每天都在做的閉環控制:感知、注意、意圖、執行、反饋、修正。而具身智能真正想學的,也不只是動作軌跡本身,而是這條閉環策略。

    所以問題變了。過去大家問:機器人能不能從人類視頻里學動作?現在更值得問的是:能不能把人類動作背后的閉環過程采下來?

    這正是臉譜心智Facemind想切入的位置。

    從模型里的loop,到數據里的loop

    臉譜心智此前在世界模型方向做了一次架構嘗試,發布了Looped World Models,也就是LoopWM。

    它的思路很直接:世界模型不一定非要靠堆更多層來變強,也可以讓同一個transformer block反復使用,對latent state做多輪refinement。也就是說,模型不是一次性給出對環境狀態的判斷,而是在隱藏狀態里多想幾輪、多修幾輪,讓世界表示逐步穩定下來。

    這和Loop Engineering的精神有點相似。外部agent loop是讓AI在工具和反饋里迭代;LoopWM則是讓世界模型在內部latent space里迭代。一個是工程系統層面的loop,一個是模型架構層面的loop。

    但當這條線走到具身智能,問題還會繼續下沉到數據層:如果模型內部可以循環修正,外部系統也可以循環執行,那訓練數據是不是也應該包含更完整的循環?

    否則,模型學到的仍然只是“動作之后的結果”,而不是“動作如何被反饋修正”。

    于是,臉譜心智提出了另一套數據范式:Ego-NeuroLoop。它想采的不是普通第 一視角視頻,而是人類操作閉環。

    Ego-NeuroLoop:把動作執行變成控制系統日志

    普通ego數據像一部電影。攝像機在人的眼睛附近,記錄畫面、手、物體、環境,以及任務推進過程。

    Ego-NeuroLoop更像一份人類閉環控制日志。它不只問“人做了什么”,還試圖記錄:人看向哪里,目標什么時候被鎖定,動作意圖什么時候出現,肌肉如何開始響應,執行過程中哪里發生偏差,人又如何根據反饋繼續調整。

    為此,它把幾類信號放到同一條時間軸上。

    world camera記錄人與環境交互的視覺上下文:物體在哪里,動作發生在什么場景中,環境狀態如何變化。gaze記錄人的視線和注意力:目標如何被發現,關鍵物體何時被鎖定,操作過程中注意力如何轉移。EEG捕捉神經層信號:動作準備、狀態切換、錯誤感知、注意力變化,都可能在腦電信號里留下線索。sEMG捕捉肌肉激活:手臂、手腕、手指何時發力,力度如何變化,動作執行如何展開。

    這樣,一個動作就不再只是視頻里的幾幀畫面。它變成一條連續鏈路:世界狀態出現,視線發現目標,大腦形成準備,肌肉進入執行,反饋觸發修正,動作繼續推進。

    如果說傳統egocentric data解決的是“機器人如何看見人類做事”,Ego-NeuroLoop試圖解決的就是“機器人如何看見人類在反饋里做事”。這兩者差別很大。前者是觀察,后者才更接近閉環學習。

    NeuroMatrix:先高精度采,再低成本放大

    要采這種數據,第 一步是硬件。

    臉譜心智設計的數據采集裝置叫NeuroMatrix,負責把world camera、gaze、EEG、sEMG等信號同步采下來。這里的核心難點不是單獨采某一種信號。攝像頭、眼動、腦電、肌電都不是新東西。真正難的是:如何把它們變成可規模化的具身智能數據生產系統。

    高精度EEG和sEMG設備往往貴、重、復雜,不適合大規模部署。低成本設備又容易帶來噪聲、漂移、接觸不良和信號不同步。

    NeuroMatrix的思路,是先用高精度版本建立底座。通過高精度采集,系統先學習人類動作意圖、神經信號、肌肉執行和視覺上下文之間的對應關系。換句話說,先畫出一張“人類閉環信號地圖”。

    哪些腦區信號和動作準備更相關?哪些頭皮電極通道最關鍵?哪些肌肉區域能更好反映手臂、手腕、手指動作?哪些gaze模式經常出現在動作發起前?有了這張地圖,硬件就可以反向收縮:減少電極數量,壓縮傳感器點位,保留最關鍵的通道,把原本實驗室級、昂貴、復雜的采集能力,逐步推向更低成本、更容易部署的形態。

    這一步解決的是采集半徑問題。如果閉環數據只能在少數實驗室里采,它很難成為機器人訓練資產。只有當采集設備足夠便宜、輕量、可部署,人類閉環數據才有機會像ego視頻一樣真正規模化。

    NeuroBooster:給神經信號做一個“VLM”

    但低成本設備一定會帶來新問題。

    EEG會受電極阻抗、頭動偽跡、接觸質量影響;sEMG會受佩戴位置、肌肉串擾、動作噪聲影響;gaze會漂移,會短時丟失;視覺會遮擋,會模糊,會受光照變化影響。

    所以第二層能力,是NeuroBooster。可以把它理解成“神經信號的VLM”。

    VLM做的是圖像和語言的對齊:一張圖里有什么,對應怎樣的語義。NeuroBooster做的是視覺、視線、EEG、sEMG的對齊:一個動作里發生了什么,對應怎樣的閉環過程。

    它要學習的不是“圖像—文本”映射,而是“環境—注意—意圖—執行—反饋”的映射。

    在訓練過程中,NeuroBooster會先利用高精度NeuroMatrix形成的信號地圖,學習不同模態之間的時間對齊關系和語義對應關系。然后圍繞手臂、手指等操作動作,建立腦區信號、頭皮電極通道、肌肉區域、視覺目標區域之間的配對關系。最后,它還要對低成本、低信噪比、不同步的數據做增強和重建。

    當EEG信號弱時,gaze和sEMG可以提供目標與執行線索;當sEMG噪聲大時,視覺和EEG可以幫助判斷動作階段;當gaze漂移時,world camera和動作狀態可以補回目標上下文;當視覺被遮擋時,EEG和sEMG仍然可能保留動作意圖和執行信息。

    最終,模型拿到的不再是一堆孤立傳感器數據,而是一條被同步、對齊、增強、結構化的閉環時間軸:環境里有什么,目標在哪里,意圖什么時候出現,肌肉如何響應,動作如何展開,反饋如何發生,下一步又如何修正。

    這才是Ego-NeuroLoop想變成訓練資產的東西。

    具身智能缺的不是更多視頻,而是更多反饋

    Ego-NeuroLoop并不是要替代現有ego-centric或human-centric數據。恰恰相反,它更像是在這些數據上補一層缺失的反饋信號。

    第 一視角視頻已經很重要。它帶來了真實場景、真實任務、真實人類行為,也讓機器人學習可以擺脫一部分真機采集限制。但如果只有視頻,模型主要學到的是觀察和結果。

    如果加入gaze,它開始知道人類注意力在哪里;如果加入EEG,它有機會捕捉動作準備和狀態切換;如果加入sEMG,它能看到肌肉執行和力度變化。如果這些信號被放到同一條時間軸上,模型才可能進一步學習人類閉環策略。

    這件事對機器人很關鍵。因為真實世界里的動作,不是“看見目標,然后執行動作”這么簡單。機器人要學會在復雜環境里找真正相關的目標,要在動作發起前形成可執行意圖,要在執行過程中根據反饋微調,要在失敗后切換策略,而不是機械重試,還要知道什么時候繼續,什么時候停下,什么時候換一種辦法。

    這些能力都不是單幀視覺能解決的。它們需要一條從目標到意圖、從意圖到執行、從執行到反饋、從反饋到修正的連續鏈路。

    這也正是Loop Engineering對具身智能的啟發:智能不是一次性輸出,而是在反饋中不斷逼近正確結果。

    最后

    Loop Engineering今天突然火,不只是因為AI圈又發明了一個新詞,而是因為coding agent先讓大家看到了閉環的威力。

    當AI能寫代碼、跑測試、看日志、修bug、接受人類review,再繼續迭代,它就不再只是一個聊天模型,而開始變成一個能工作的系統。

    具身智能也在走向同一件事。只是機器人面對的不是編譯器,而是真實世界;不是單元測試,而是視覺、觸覺、力、姿態、遮擋、滑落和失敗。

    這也是為什么遙操作數據不夠,普通ego數據也還不夠。前者太貴太慢,后者更像觀察,缺少人類反饋和意圖過程。

    未來機器人真正需要的,可能不是更多“人類動作錄像”,而是更完整的“人類閉環數據”。

    從LoopWM到Ego-NeuroLoop,臉譜心智想講的故事也正在這里收束:模型架構要能loop,agent系統要能loop,訓練數據也要把人類的loop采下來。

    因為如果機器人未來要像人一樣理解世界、組織動作、利用反饋、持續修正,那么第 一步,可能不是先讓機器人動起來,而是先把“人類到底如何把動作做對”記錄清楚。

    標簽: Loop Engineering Harness Engineering 臉譜心智

江南有愛 天緣綠助力 ---廣西天緣綠集團緊急馳援橫州抗洪一線
最后一頁
主站蜘蛛池模板: 日韩欧美亚洲日产国| 韩国v欧美v日本v亚洲| 国产欧美亚洲精品| 一区二区三区欧美在线| 色综合五月天导航| 日本精品视频在线播放| 国产精品视频久久久久| 日韩欧美精品在线不卡| 日韩欧美亚洲区| 日本一区二区三区视频在线播放 | 日本不卡一二三区| 久久色精品视频| 久久99导航| 99国产在线视频| 日本一区二区黄色| 亚洲a成v人在线观看| 欧美高清性xxxxhd| 精品人妻一区二区三区四区在线| 国产欧美一区二区三区不卡高清| 国产福利视频在线播放| 色播亚洲婷婷| 国产精品亚洲天堂| 日本国产中文字幕| 国产精品美女久久久久久免费| 91久久久久久久久| 欧美日韩福利在线观看| 国产欧美精品aaaaaa片| 日韩av资源在线| 国产高清精品在线观看| 日韩欧美精品久久| 日本一区二区三区视频免费看| 国产麻豆一区二区三区在线观看 | 亚洲专区国产精品| 欧美日韩国产高清视频| 国产精品成av人在线视午夜片| 日日夜夜精品网站| 99久久综合狠狠综合久久止| 青青久久av北条麻妃黑人| 88国产精品欧美一区二区三区| 国产一区二区三区高清视频| 日韩av免费网站|