陕西大学生网
讲大学生故事·传大学生声音
首页

无人机“进群聊” 西工大在机器交互方面取得创新进展

人民日报 2023-10-31 浏览:

image.png?x-oss-process=style/w10

在线群聊极大地方便了人们的沟通方式,能否把机器也拉进群,让它们组团商量着干活,并和人类无障碍地沟通和交流,更好地服务于生产生活?

近日,西北工业大学李学龙教授和同事们在机器交互方面取得创新进展:基于国产大模型,研发了 “群聊式”无人机控制框架,给每架无人机装上了大脑,让无人机集群在语言沟通中动态协同,实现了开放环境下“人机”和“多机”的对话交互,打破人类和机器的交互壁垒,进一步拓展了临地安防的应用场景。

团队提出“群聊式”对话交互方法,将声音、图像和无人机自身状态等多种信息,通过大模型转换为自然语言的对话形式,实现了用户与无人机,以及无人机与无人机之间自主和直观的交互方式。同时设计了任务引导的主动感知机制,提出了多传感器融合的低空搜索、动态避障和视觉定位算法。在实际任务执行中,根据感知信息和任务目标,动态调整无人机飞行路径和观测位姿,逐渐降低环境中的不确定性,实现高效的信息采集和任务执行。此外,团队还依托无人机平台设计了夹爪等末端执行器,将传统无人机拓展为具备抓取能力的“飞行机器人”,构建了异构无人机集群协同控制机制,结合环境感知反馈,实时调整无人机编队的飞行状态,使集群分工执行区域搜索、目标定位和抓取等任务。

据介绍,大模型自主无人机集群是团队将生物智能 “思维计算—实体控制—环境感知”的三元交互模式应用于自主智能体的一次成功尝试,依托大语言模型、无人机平台和多种传感器,实现对话交互、主动感知和自主控制,对安防巡检、灾害救援、空中物流等临地安防场景下的应用具有重要意义。


责任编辑:龚仕建
相关文章
西安建筑科技大学召开本科教育、国际化建设“十五五”

西安建筑科技大学召开本科教育、国际化建设“十五五”

6月5日下午,西安建筑科技大学在雁塔校区召开本科教育、国际化建设“十五五”发展规划专家论证会。会议邀请西安石油大学原党委书记惠泱河、西安交通大学电子与信息学部党委书记梁莉、西北农林科技大学国际合作与交流处处长王小龙、长安大学教务处处长兼创新

西北大学代表团赴港澳开展人才交流合作洽谈

西北大学代表团赴港澳开展人才交流合作洽谈

6月1日至4日,西北大学党委副书记张清率代表团赴香港、澳门地区多所高校,进行人才交流与合作洽谈。代表团先后走访了香港理工大学、香港中文大学、香港科技大学、香港大学、香港浸会大学、香港城市大学和澳门大学等7所高校,举办了6场人才交流会和6场专题座

西北农林科技大学承办咸阳市政协正确政绩观暨素质能力

西北农林科技大学承办咸阳市政协正确政绩观暨素质能力

6月3日至5日,由西北农林科技大学承办的咸阳市政协树立和践行正确政绩观暨素质能力提升培训班在校举办。来自咸阳市政协机关、各市县区政协及部分市政协委员共53人参加学习。 本次培训采用专题辅导与现场教学相结合的方式,课程涵盖习近平新时代中国特色社会

西安交大举办“共识之寻”国际研讨会聚焦中欧经济关系

西安交大举办“共识之寻”国际研讨会聚焦中欧经济关系

近日,“共识之寻——全球失序时代中欧经济关系”国际研讨会在西安交通大学举行。西安交通大学校长、中国工程院院士张立群,中国商务部原副部长、世界贸易组织前总干事易小准,欧盟委员会原国际事务司司长、欧盟常驻世界贸易组织代表团原团长John Alistair C

西安交大校长张立群率团赴贵州推进合作交流

西安交大校长张立群率团赴贵州推进合作交流

6月5日至6日,西安交通大学校长、中国工程院院士张立群率队赴贵州省,推动双方合作交流。在贵州期间,张立群与贵州省委副书记、省长李炳军举行会谈,实地调研贵州轮胎股份有限公司并出席科技成果鉴定会,同时召开贵州校友座谈会。校长助理黄忠德参加了相关活