在2022年5月29日刚刚结束的南科大工学院综合设计项目成果展中,SUSTechDL课题组探索师生共建协作机器人学习「新实验」项目,指导董榆健、肖阳、魏锦启三位同学的《结构化通用表征非结构环境的人机交互系统》从45个参展项目中脱颖而出,荣获全场唯一的一等奖;指导杨宇轩、于志洋二位同学的《轻量化实体建模端云互通技术和图形化编程系统开发》荣获二等奖,祝贺五位同学以优异的成绩完成综合设计暨毕业设计,前途似锦,此次是SUSTechDL课题组连续第三年参加综合设计项目。

《结构化通用表征非结构环境的人机交互系统》

在本项目中,来自机械与能源工程系的2022届本科毕业生董榆健、肖阳、魏锦启三位同学,提出将教学环节的人机交互过程,通过机器视觉、软体机器人、机械设计、云端可视化以及协作机器人的系统集成,并应用与教学实践环节。

他们采用基于二维码的视觉位姿解算技术,利用课题组自研的柔性自适应手指形变预测力学信息,开发一套包含适用三种适应不同场景的硬件、一套基于网页的交互式数据采集软件以及一系列的样例与使用教程,能够高效率的将非结构的环境信息以结构化的数据表达出来,能在数据采集、机器人操作学习、教学实验课程中得到应用。

《轻量化实体建模端云互通技术和图形化编程系统开发》

在本项目中,2022届本科毕业生杨宇轩(机械与能源工程系)与于志洋(计算机科学与工程系)组成团队,鉴于现有大多实体建模系统研究者开发门槛高、建立的模型与物理实体互动性低且昂贵繁琐的使用体验,利用在线建模开发平台并基于VUE的网页框架搭建云端仿真可视化系统,实现云端软件与本地端机器人系统的实时通讯及控制。

本项目由两部分组成,分别为云端实体建模端云互通技术(杨宇轩负责)和针对机器人部件前后端结合的图形化编程系统开发(于志洋负责)。项目第一部分侧重于搭建机器实体建模的轻量化网站与端云通信,实现最终能够在网页端建模、仿真,并由云端实时连接、控制本地端自动化机械装置。项目第二部分是在此基础上开发2D的图形化编程环境,分为三个子系统:模型展示系统、模型运动回放系统和前后端结合图形编程系统。使整个系统将前后端结合,在2D图形化编程界面完成操作后,可直接在三维仿真环境中看到程序控制下机器人部件的运动。

以「设计与学习」为原点,从「综合设计」到「互联网+」,从「课堂实践教学」到「前沿基础研究」

在指导同学们参加本次综合设计的过程中,SUSTechDL课题组也邀请来自更多不同院系的同学加入进来,提供来自不同专业背景的新视角与在下一代教具研制过程中的新想法。来自创新创意设计学院的梁万生与白钰溦同学,于2022年春季学期加入到该项目的开发中,从产品体验设计的角度,为本课题涉及的「新实验」项目提供全新的视角与思路,为学长们提供了观点犀利、内容丰富、视角独特、以人为本的反馈与互动,为后续的课题开展提供了宝贵的意见和建议。

  • 参加「互联网+」创新创业大赛:后续将由梁万生与白钰溦同学,以及本课题项目即将毕业的同学们组成参赛团队,参加第八届中国国际“互联网+”大学生创新创业大赛,祝愿他们取得好成绩。
  • 备稿「CoRL 2022」学术会议:参加该项目的董榆健、肖阳、魏锦启三位同学目前也在积极准备将该部分的研究成果成立成学术论文,拟提交至机器人学习顶会CoRL,祝愿他们的论文顺利接收。
  • 新一代「DeepClaw」教具系统:目前,多名2022年度的ME336参课同学表达了希望参与到该系统的新一代研制工作,邀请参加2023年的工学院综合设计,感兴趣的同学请邮件联系任课老师。

关于SUSTech设计与学习实验室

SUSTechDL是由南方科技大学BionicDL与mainDL课题组联合组建的科研团队,共同围绕基础设计理论(Design Method)与机器学习方法(Machine Learning)展开不同侧重的科研、教学与产业化合作。SUSTechDL最早源自宋超阳博士在2015年于澳大利亚莫纳什大学组建的永续智能机器人课题组(Sustainable and Intelligent Robotics Group),后于2018年加入南方科技大学机械与能源工程系后,更名为仿生设计与学习实验室(Bionic Design and Learning Lab),系统开展面向仿龙虾两栖过约束机器人系统与柔性抓取操控学习等方面的基础研究;自2019年起开展于美国麻省理工学院的国际办学合作,组建机器智能设计与学习教研实验室(Machine Intelligence Design and Learning Lab),主要开展跨课程连贯式大团队实验项目新工科教改;自2022年万芳博士加入创新创意学院担任助理教授后,重组为南方科技大学设计与学习实验室(SUSTech Design and Learning Lab),包括由宋博士负责的BionicDL实验室以及由万博士负责的mainDL实验室。