陕西大学生网
讲大学生故事·传大学生声音
首页

无人机“进群聊” 西工大在机器交互方面取得创新进展

人民日报 2023-10-31 浏览:

image.png?x-oss-process=style/w10

在线群聊极大地方便了人们的沟通方式,能否把机器也拉进群,让它们组团商量着干活,并和人类无障碍地沟通和交流,更好地服务于生产生活?

近日,西北工业大学李学龙教授和同事们在机器交互方面取得创新进展:基于国产大模型,研发了 “群聊式”无人机控制框架,给每架无人机装上了大脑,让无人机集群在语言沟通中动态协同,实现了开放环境下“人机”和“多机”的对话交互,打破人类和机器的交互壁垒,进一步拓展了临地安防的应用场景。

团队提出“群聊式”对话交互方法,将声音、图像和无人机自身状态等多种信息,通过大模型转换为自然语言的对话形式,实现了用户与无人机,以及无人机与无人机之间自主和直观的交互方式。同时设计了任务引导的主动感知机制,提出了多传感器融合的低空搜索、动态避障和视觉定位算法。在实际任务执行中,根据感知信息和任务目标,动态调整无人机飞行路径和观测位姿,逐渐降低环境中的不确定性,实现高效的信息采集和任务执行。此外,团队还依托无人机平台设计了夹爪等末端执行器,将传统无人机拓展为具备抓取能力的“飞行机器人”,构建了异构无人机集群协同控制机制,结合环境感知反馈,实时调整无人机编队的飞行状态,使集群分工执行区域搜索、目标定位和抓取等任务。

据介绍,大模型自主无人机集群是团队将生物智能 “思维计算—实体控制—环境感知”的三元交互模式应用于自主智能体的一次成功尝试,依托大语言模型、无人机平台和多种传感器,实现对话交互、主动感知和自主控制,对安防巡检、灾害救援、空中物流等临地安防场景下的应用具有重要意义。


责任编辑:龚仕建
相关文章
深耕高平历史文化资源,共绘城乡遗产保护新篇章

深耕高平历史文化资源,共绘城乡遗产保护新篇章

——记西安建筑科技大学赴山西省晋城市高平市赓续城乡遗产暑期社会实践团 青年当挺膺,奋发高平行 2023年5月,习近平总书记在山西考察时指出,要认真贯彻落实党中央关于坚持保护第一、加强管理、挖掘价值、有效利用、让文物活起来的工作要求,全面提升文物保

西交能动学子赴甘肃、青海等地调研新质生产力与“双碳

西交能动学子赴甘肃、青海等地调研新质生产力与“双碳

近日,西安交通大学能动学院“能动‘碳’路队”社会实践团深入甘肃、青海等地,围绕新质生产力与“双碳”目标展开了一系列丰富多彩的调研活动。通过政产学研四位一体的深度探索,实践团成员们不仅增长了见识,拓宽了视野,更为助力国家实现碳达峰、碳中和目

寒假安全记心间,快快乐乐迎新年

寒假安全记心间,快快乐乐迎新年

题目:寒假安全记心间,快快乐乐迎新年 来源:曹堡村村主任助理 作者:文/张啸凝 肖晓纪 图/张啸凝 肖晓纪 为了让曹堡村的孩子们过上一个安全、充实且有意义的寒假,1月13日曹堡村村主任助理张啸凝同学和肖晓纪同学在曹堡村村委会会议室开展“寒假安全记心间

西北工业大学深入学习贯彻习近平总书记五四青年节对全

西北工业大学深入学习贯彻习近平总书记五四青年节对全

在五四青年节到来之际,习近平总书记代表党中央,向全国广大青年致以节日祝贺和诚挚问候,并寄语新时代青年奋力书写为中国式现代化挺膺担当的青春篇章。西北工业大学第一时间响应,以组织师生研讨学、引领青年沉浸学、带动青年感悟学等方式学习贯彻习近平总

以改革破局!看西安交通大学钱学森学院如何培养拔尖创

以改革破局!看西安交通大学钱学森学院如何培养拔尖创

走在教育强国大路上·聚焦人才自主培养 “音乐艺术如何进行定量分析?”“旋律背后蕴含着怎样的数学特征?”……在西安交通大学“科学与艺术的交汇”课上,学生们一边听着莫扎特的《D大调第二长笛协奏曲》,一边思考着艺术背后的科学思维。 西安交大钱学森学