隨著具身智能從技術探索逐步邁向產業(yè)應用,機器人如何在真實物理世界中持續(xù)學習,并將人類操作經驗轉化為可復用技能,正在成為行業(yè)規(guī)模化發(fā)展的關鍵挑戰(zhàn)。
基于Lumos Nexcore全域產業(yè)具身體系,鹿明機器人正式發(fā)布Lumos Ego Vue雙目第一視角技能經驗入口 與 Lumos數據管線自動化技能生產基礎設施。兩項能力圍繞具身智能從真實世界獲取經驗、理解任務邏輯、沉淀技能資產到支撐模型訓練的關鍵環(huán)節(jié)展開,進一步完善鹿明面向產業(yè)具身智能的數據與技能基礎設施體系。
通過Lumos Ego Vue與Lumos數據管線,鹿明正在打通“真實經驗獲取—技能理解與沉淀—模型訓練驗證—機器人場景應用”的完整鏈路,推動具身智能從單點任務訓練走向可持續(xù)學習、可規(guī)模化復制的產業(yè)應用階段。
01.
從真實世界獲取經驗, Lumos Ego Vue構建具身智能技能學習入口
機器人要真正進入復雜產業(yè)場景,不僅需要具備執(zhí)行動作的能力,更需要理解動作背后的任務邏輯、空間關系以及物理規(guī)律。
基于這一需求,鹿明基于Lumos NexCore全域產業(yè)具身體系,打造連接真實世界、數據、模型與實體執(zhí)行的能力體系,并正式推出Lumos Ego Vue雙目第一視角技能經驗入口,幫助機器人從真實場景中獲取連續(xù)技能經驗,推動具身智能從任務執(zhí)行走向持續(xù)學習。
作為連接真實世界與具身智能模型的重要入口,Lumos Ego Vue通過第一人稱視角感知真實操作過程,將人類在真實環(huán)境中的操作經驗轉化為機器人可理解、可學習的多模態(tài)技能資產。
Lumos Ego Vue雙目第一人稱視角感知系統(tǒng),如同一雙能夠解析物理世界的“慧眼”。借助雙目三維信息,它能夠深度解析雙手與物件的交互過程,將人類的操作軌跡與語義細節(jié)轉化為機器人可理解的多模態(tài)技能資產。
通過第一視角感知方式,Lumos Ego Vue持續(xù)捕捉真實世界中的連續(xù)操作過程,理解人與環(huán)境之間的交互關系,讓機器人學習的不只是動作本身,更是動作背后的空間關系、任務邏輯與物理規(guī)律。
![]()
Lumos Ego Vue以雙目第一人稱視角采集圖
不同于傳統(tǒng)面向單一任務的數據采集方式,Lumos Ego Vue面向真實世界中的復雜長程任務,通過持續(xù)獲取人與環(huán)境交互過程中的技能經驗,為具身智能模型訓練提供更加豐富、更貼近真實場景的學習來源。
同時,Lumos Ego Vue采用輕量化設計,能夠自然融入工業(yè)制造、物流搬運、家庭服務等多元真實場景,在不改變操作者原有工作流程的情況下獲取高質量技能經驗,加速真實世界經驗向機器人能力的轉化。
02.
從操作經驗到技能資產,鹿明自研數據管線構建自動化技能生產基礎設施
真實世界經驗是具身智能發(fā)展的核心資源,但如何將復雜、多模態(tài)、長時序的操作過程轉化為模型能夠理解和學習的標準化技能數據,仍是行業(yè)面臨的重要挑戰(zhàn)。
針對這一問題,鹿明自主研發(fā)Lumos數據管線自動化技能生產基礎設施,通過多源數據接入、智能處理與技能解構能力,將真實世界操作經驗轉化為面向具身智能模型訓練的標準化技能資產,打造連接“經驗獲取、技能理解、模型訓練與能力迭代”的產業(yè)級技能生產體系。
Lumos數據管線支持EGO、UMI等多源數據接入,融合視覺、空間、動作等多模態(tài)信息,通過高精度時空同步與數據對齊能力,完整保留真實操作過程中的動作軌跡、空間關系和交互細節(jié)。
依托全自動化技能解構設施,通過其核心VLM視覺大模型,系統(tǒng)可實現(xiàn)任務語義自動拆分與標準化標簽生成。這一創(chuàng)新突破傳統(tǒng)人工整理和標注模式,能夠精準還原三維空間運動路徑與手部位姿,將人類的操作經驗精準轉化為大模型可量化、標準化的高質量技能大模型資產。
![]()
Lumos管線自動進行任務分割與語義標注
圍繞真實世界技能生產全過程,Lumos數據管線進一步打通:多源數據接入 → 數據質量處理 → 場景語義理解 → 空間智能建模 → 標準化技能數據交付的完整鏈路,實現(xiàn)從原始操作經驗到機器人技能資產的高效轉化。
同時,系統(tǒng)通過模塊化架構提升技能生產效率:
基建設施層:深度對接云端算力池、分布式存儲網絡及高速網絡,智能資源調度系統(tǒng)支持上萬小時數據批量處理,架構具備無限橫向擴容能力。
數據入口層:搭建了嚴苛的三重質檢過濾機制,從硬件、內容、模態(tài)對齊三大維度剔除無效、低質數據,實現(xiàn)全鏈路數據血緣追溯,高效支撐上層算法調用與數據管理。
核心算法層是鹿明管線的核心技術壁壘。針對第一視角采集的行業(yè)共性難題,團隊專項優(yōu)化了手部21關節(jié)三維姿態(tài)重建算法及EGO-SLAM全局軌跡重建算法,可精準還原三維空間毫米級運動路徑和厘米級手部位姿。
編排控制層:專為海量數據批量處理設計了三層動態(tài)調度機制,搭配斷點續(xù)跑、分布式并發(fā)產線等能力,最大化壓榨算力與存儲吞吐,持續(xù)逼近“采集、處理時長1:1”的行業(yè)極致效率。
![]()
鹿明自研數據管線全流程示意圖
03.
打通“數據獲取—技能沉淀—場景落地”閉環(huán),Lumos Nexcore推動產業(yè)具身規(guī)模化應用
隨著具身智能從實驗室走向產業(yè)現(xiàn)場,未來競爭的關鍵將不只是擁有更強的模型或機器人本體,而是誰能夠建立持續(xù)產生技能、驗證技能并迭代技能的基礎設施。
通過構建“第一視角經驗入口—自動化技能解構網絡—標準化具身技能資產庫”的基礎設施矩陣,鹿明進一步推動軟硬件能力協(xié)同,實現(xiàn)具身智能技能生產流程的工程化與模塊化。
該體系能夠幫助機器人以更低成本、更高泛化能力應對真實多變的非標工業(yè)場景任務,加速通用智能機器人從單一任務執(zhí)行走向復雜環(huán)境自主作業(yè)。
![]()
鹿明數據管線功能架構圖
隨著由“第一視角經驗入口—數據管線—標準化技能數據”構成的基礎設施體系逐步完善,鹿明進一步打通了具身智能:數據感知 → 技能沉淀 → 模型學習 → 場景落地的完整閉環(huán)。
依托Lumos Ego Vue與Lumos數據管線,鹿明能夠將真實世界中的人類操作經驗持續(xù)沉淀,并轉化為機器人自主、靈活作業(yè)所需的技能能力,推動具身智能從核心技術研發(fā)走向產業(yè)應用閉環(huán)。
未來,鹿明將持續(xù)圍繞Lumos Nexcore全域產業(yè)具身體系,推動數據、模型、技能與實體執(zhí)行能力深度融合,讓機器人具備在真實世界中持續(xù)學習和進化的能力,加速具身智能在產業(yè)場景下的規(guī)模化應用。
特別聲明:以上內容(如有圖片或視頻亦包括在內)為自媒體平臺“網易號”用戶上傳并發(fā)布,本平臺僅提供信息存儲服務。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.