3D语义理解

LEO

embodied-generalist.github.io

LEO是基于大型语言模型开发的多模态多任务具身智能代理项目官网，核心定位为面向3D环境交互的通用AI研究成果展示平台。平台支持3D视觉语言对齐技术演示、3D具身任务效果展示、相关训练数据集信息查询三类核心功能，主要面向AI研究人员、机器人开发从业者、高校计算机相关专业师生三类用户，可用于3D具身智能技术调研、多模态AI模型性能参考、机器人任务规划方案设计等场景。项目公开了两阶段训练框架的技术细节，以及在3D字幕生成、3D场景问答、具身导航、机器人操作等多个任务中的实验结果，为相关领域的技术研发提供参考依据。