一、项目背景与目的
随着具身智能技术的快速发展,人形机器人正从实验室走向教育、服务等真实场景。面向未来课堂,机器人不再只是被编程的工具,而是能够与教师和学生协同、主动理解环境、提供个性化服务的智能伙伴。为了推动具身智能协同未来课堂的落地探索,并创新拔尖人才培养模式,本专项项目立足真实的教学服务场景,以人形机器人为载体,通过二次开发构建一个融合大模型问答、自主导航引导、仿人抓取操作的智能教学服务系统。
二、项目核心任务
项目围绕以下三项关键技术任务开展开发。
任务一:基于大模型微调的智能问答与语音交互系统
1. 模型微调:以开源大模型为基座,利用提供的学生手册、学院基本情况汇编、某课程核心知识库等内部数据进行微调,构建专属问答模型。
2. 语音交互:集成语音唤醒、语音识别与语音合成模块,实现人机自然对话。机器人需能准确回答关于校规院情、课程知识点等问题,并支持连续对话与意图识别。
3. 部署:模型可运行于人形机器人载体,问答响应快速。
任务二:机器人导航与路径规划
1. 环境建图:基于机器人搭载的传感器,完成实验室区域、学院空间的即时定位与地图构建,生成可用于导航的二维地图。
2. 自主导航:实现用户下达目标点后,机器人自主规划全局路径,并动态避障,平稳抵达目标点。
3. 引导功能:机器人在行进过程中可语音提示,到达后播报目的地介绍。支持中途暂停、重新规划及回到充电桩。
任务三:协同作业
1. 手部抓取控制:利用机器人仿生五指手或两指夹爪,结合视觉识别,实现对特定物品的检测、定位与抓取。
2. 协同作业:将导航与抓取串联——机器人自主导航至物品附近,视觉识别后调整身体姿态,伸出手臂完成抓取,并放回指定收纳区。
三、申报要求
1. 申报对象:全校在读本科生、研究生,鼓励跨学科组队。每队人数3-6人,设队长1名,指导老师1名(可自行联系或由必威betway西汉姆协调)。
2. 基础能力:具备Python/C++编程基础,了解Linux、ROS/ROS2,对深度学习、机器人有实践经历者优先。
3. 设备支持:项目提供人形机器人硬件平台,并开放底层API接口。
四、项目支持与资源
1. 经费资助:立项项目给予最高10万元/队的经费支持,用于开发耗材、计算服务、差旅、学生助研酬金等经费支持。
2. 技术支持:配备企业导师,提供机器人硬件技术培训。
3.成果激励:项目成果可用于认定未来机器人专业《机器人综合创新实践I,II》的学分和成绩。优秀项目可推荐至挑战杯、中国国际大学生创新大赛等重要赛事和机器人相关竞赛。
4. 项目周期:6个月
五、申报方式
申报书于5月31日之前发送至学院邮箱FT@pub.seu.edu.cn,模板见附件。
