预训练大模型GPT技术的突破，可以为机器人提供智慧的大脑。同时，具身智能机器人是一个具有物理实体、可与真实世界进行多模态交互，像人类一样感知和理解环境，并通过自主学习完成任务的智能体。二者的结合将使机器人做到“心灵手巧”。

达闼云端机器人国家新一代人工智能开放创新平台与中国计算机学会、AITISA联盟、OpenI启智、CCF开源发展委员会、北京大学、复旦大学、北京航空航天大学、中山大学、北京邮电大学、北京智谱联合，共同举办达闼杯“机器人大模型与具身智能挑战赛”，旨在鼓励开发者能够利用大模型技术和具身智能技术，实现跨模态人机交互、并能自主完成各种复杂任务的机器人应用。

为此，我们提供一个比赛平台，在模拟环境中实现机器人（Agent）的各项任务。基于比赛平台，参赛者可以结合大规模视觉和语言预训练模型（LLMs, CLIP等）算法来训练机器人完成复杂的任务。大赛鼓励参赛者采用各种人工智能技术和工具，包括但不限于大语言模型（LLMs）、多模态视觉理解模型、深度学习和强化学习，来提高机器人的具身智能能力。

 “机器人具身智能挑战赛”作为CCF中国软件大会的赛事内容，向来自学术界、工业界和研究机构的团队开放。参赛者需要提交详细的技术报告，描述他们系统的设计、实现和评估。通过本次比赛，参赛者既可以学习和提升人工智能和机器人领域的知识与技术，还可以与顶级专家直接交流，共同探讨通用人工智能的未来发展。另外，大赛配备了免费的算力支撑，各路勇士们，还在犹豫什么，快快组队参赛吧！

三、赛题设计

在仿真环境中，参赛者通过大模型训练机器人在咖啡厅场景成为合格的咖啡厅服务员。这项比赛的考核要点是将大语言模型（LLMs）整合到机器人系统中，开发能够理解自然语言并以友好和有效的方式与人类互动，并能在咖啡店仿真场景中自主完成各种服务任务的智能机器人。

选手可以按照一般常识性理解，进行机器人任务设定和训练。在仿真场景中，机器人可以与可交互的物品和NPC进行互动操作的训练，比如：咖啡店服务员与顾客（NPC）互动、接受和执行订单以及回答有关菜单的问题、导航、操作咖啡机、清理桌子/地面、开空调/开灯、递送咖啡/饮料/食物等。

• 主动探索和记忆（Active Exploration and Memorization）：机器人在环境中通过主动探索获得各种环境信息，实现对位置环境的感知，形成以环境感知信息以及运动轨迹等历史信息维护一个机器人自身的记忆库。

• 场景多轮对话（Grouded Question Answering）：多轮对话要求机器人智能体具有与人进行流畅的交流能力，具身对话是机器人利用视觉等传感器获得的场景信息基础上，完成于场景相关的对话。

• 视觉语言导航（Vision Language Navigation）：机器人要在不同的场景下承担多种复杂的导航任务。我们的模拟器支持多任务的现实世界导航和物体互动。可以利用我们的环境完成简单到复杂的视觉语言导航，并有不同难度的指示，以及交流导航，机器人智能体可以在导航中寻求帮助。

• 视觉语言操作（Vision Language Manipulation）：要求机器人按照视觉和语言的场景描述来抓取一个物体。参赛者需要根据大语言模型提供的指令，解决在不同场景下抓取不同物体的问题。具体抓取物品的技能需要参赛者基于提供的环境和工具接口，通过强化学习等方式进行训练。

参赛队必须将LLMs纳入其机器人系统，以促进自然语言的理解和互动。比赛将根据以下标准来评估机器人系统的性能：

• 任务完成的准确性和效率：参赛者将被评估任务完成的准确性和效率，包括物体操作、导航到准确位置的精度，执行推理速度，订单执行和人机互动。机器人必须准确、高效地完成任务，才能获得分数。

• 人与机器人的互动：参赛者将被评估其机器人与顾客和工作人员互动的自然度和友好度。机器人必须以自然和友好的方式进行交流，以获得积分。

• 时间限制：参赛者将有规定的时间来完成任务，在规定时间内得分最高的团队将被宣布为获胜者。

机器人具身智能挑战赛对来自全球学术界、工业界和研究机构的团队开放，包括：

• 在机器人和人工智能方面有专长的大学和研究机构

• 专门从事机器人和人工智能应用的初创企业和公司

• 独立的机器人爱好者和业余爱好者

机器人具身智能挑战赛将在CCF中国软件大会会议期间举行比赛颁奖。

作品提交截止日期：2023年11月20日

公布比赛结果和颁奖日期：2023年12月3日

除挑战赛统一要求文档外，提交内容还包括方案设计文档、RDK技能开发蓝图源文件，以及录制的运行结果视频。凡提交的参赛作品，赛事组织方拥有永久的使用权，如经过审核后发布到海睿机器人技能应用商店（Robot Skill Store），获得的收益将按一定比例和平台分成（具体细节以最终官方公布为准）。作品提交具体方式和技术交流社区请通过“点击此处”链接到大会网站，或参见文末“作品提交说明”与“比赛指南”链接。

评分规则：分为总分排行与单项排行两种名次。

1）总分排行规则：场景下有多个任务，任务得分为完成这些任务的分数相加；每位选手按比赛要求提交设计文档、录制视频、蓝图源文件等内容，组委会进行评审打分。

2）单项排行规则：场景下有多个任务，每个任务单独进行分数排行；每位选手按比赛要求提交设计文档、录制视频、蓝图源文件等内容，组委会进行评审打分。

3）决赛：赛事评委按照大赛组委会的相关规定和要求，对选手的作品进行计分、排名。当分数相同时，文档质量等将成为附加排序依据。约前 30% 的队伍进入答辩环节，参加答辩的队伍最终排名依据测试排名（权重 65%）与答辩排名（权重 35%）的综合排名。

4）如果因题目难度过大或版本等不可抗因素，导致无团队完成任意一个任务，组委会重新评审后，设定新的打分标准，按新的标准重新打分。如违背大赛规定规范，可能会被取消参赛资，具体内容由大赛组委会规定。

主办单位：

中国计算机学会

承办单位：

中国计算机学会软件工程专委会、系统软件专委会、开源发展委员会、达闼机器人

协办单位：

AITISA联盟、OpenI启智、北京大学、复旦大学、北京航空航天大学、中山大学、北京邮电大学、北京智谱华章科技有限公司

名誉主任：

梅    宏——中国科学院院士

黄晓庆——达闼机器人创始人、董事长兼CEO

主任：

金    芝——中国计算机学会常务理事及系统软件专委会主任、北京大学教授

执行主任：

彭    鑫—— CCF软件工程专委会副主任、CCF开源发展委员会常务委员、复旦大学计算机科学技术学院副院长

副主任：

余    跃——新一代人工智能产业技术创新战略联盟(AITISA)、OpenI启智开源平台运营中心主任

郭    耀——北京大学计算机学院副院长，CCF系统软件专业委员会执行委员

胡春明——北京航空航天大学软件学院院长，CCF系统软件专业委员会委员、青年计算机科学家论坛学术委员会委员

王    斌——达闼机器人副总裁

委员：

董    震——复旦大学计算机科学技术学院青年副研究员

梁小丹——中山大学智能工程学院副教授

郭    迪——北京邮电大学人工智能学院教授

马世奎——达闼机器人研发副总裁

刘德兵——北京智谱华章科技有限公司董事长

•  扫描下方二维码添加工作人员邀请入群

宣讲预告：本周日（9月17日）下午将举行比赛宣讲会，请各位预报名选手添加我们工作人员入群关注通知，届时将有众多大咖及技术专家在线交流！

• 赛事咨询

黄老师 17777791807

• 了解详情

1）您可点击https://chinasoft.ccf.org.cn/notice/Robot.html查看赛事官网。

2）比赛指南：

http://chinasoft.ccf.org.cn/notice/赛题指南.pdf

3）作品提交说明：

http://chinasoft.ccf.org.cn/notice/作品提交说明文档.pdf