一、成果簡介

    為足式機器狗、人形機器人等提供開放世界自主導航、基于強化學習的運動控制和後端多模态理解大模型等智能服務，使其成為多樣化場景下的具身智能機器人。

    開放世界自主導航：雷達與視覺協同導航方案，支持大區域建圖與任意位置重定位，支持自主路徑規劃與自主避障，基于視覺語義在局部範圍進行自主移動。

    基于強化學習的運動控制：雷達與視覺協同的強化學習運動控制方案，讓四足機器狗可以自主地根據地形不同采取不同的運動控制信号，自适應複雜場景與多樣地形，而無需人為後端操控。

    多模态理解大模型：後端通過輕量化多模态理解大模型對視頻流進行實時理解，讓機器人看懂世界，知道有什麼對象、發生了什麼事情，并形成文字紀要，從而根據場景需求讓機器人可以自主地觸發報警或響應動作。同時，多模态理解大模型也支持機器人與人的語義交互。

    對外展示：

  二、應用領域和市場前景

    應用于足式機器狗、人形機器人等，使其具備自主導航、自主運動控制、自主理解世界的能力，并進一步應用于各類場景。

  三、合作方式

    技術服務、合作開發、技術入股。

對接方式

1.合作意向方聯系beat365官方网站産學研合作辦公室；

2.産學研合作辦公室溝通了解意向方情況；

3.會同成果完成團隊與意向方共同研讨合作方案。

beat365官方网站産學研合作辦公室

郵箱：hecheng1213@pku.edu.cn

未經授權，請勿轉載