资讯中心

三菱电机研发场景感知交互技术,可给驾驶员提供自然直观的指导

2020-07-27 09:16:29来源:盖世汽车 余秋云 阅读量:21425

分享:
导读:为让机器与人类更加直观、自然地互动,三菱电机研发了一种场景感知交互技术。
  据外媒报道,近日,日本三菱电机(Mitsubishi Electric Corporation)公司宣布其研发了全球首款能够与人类进行高度自然其直观互动的技术,该技术基于场景感知能力,能够将多模态感知信息翻译成自然语言。该款新技术名为场景感知交互(Scene-Aware Interaction),整合了三菱电机的专有Maisart紧凑型AI技术,可以分析多模态感知信息,通过依赖于上下文情境生成的自然语言与人类实现高度自然且直观的交互。
 
  该技术基于多模态感知信息,如摄像头捕捉的图像和视频、麦克风录下的音频信息以及激光雷达测量的定位信息,以识别情境中的物体。为了对这些不同类别的信息进行优先排序,三菱电机研发了注意力多模态融合技术(Attentional Multimodal Fusion),能够自动加权突出的单模态信息,为准确描述场景而选择适当词汇。在采用通用测试集的基准测试中,注意力多模态融合技术采用音频和视觉信息来取得基于共识的图像描述评价(CIDEr)得分,发现比仅使用视觉信息的得分高出29%。三菱电机将注意力多模态融合与场景理解技术和基于情境的自然语言生成技术相结合,实现了强大的端到端场景感知交互系统,在不同场景下,都可以与用户实现高度直观的交互。
 
  场景感知交互技术可用于汽车导航应用,为驾驶员提供直观的路线导航。例如,系统不再指示驾驶员“在50米内右转”,而是提供场景感知型指导,如“在邮箱前右转”或“跟着灰色的车向右转”。此外,该系统还会在预测到附近有物体的行进路径与车辆的行进路径相交时,生成语音警报,如“有行人正在过马路”。为了实现这一功能,该系统会分析场景,识别出场景中隐藏的视觉路标以及动态元素,然后利用此类东西识别物体和事件,为导航生成直观的句子指导。
 
  利用深度神经网络进行物体识别、视频描述、自然语言生成和口语对话等技术最近取得了很多进展,可以让机器能够更好地理解周围的环境,并更自然、更直观地与人类互动。场景感知交互技术预计具有广泛的适用性,包括用于车载信息娱乐系统的人机接口、在建筑物中与机器人交互以及工厂自动化系统、监控人类健康状况的系统、为人类解释复杂场景的监测系统、鼓励保持社交距离的系统、在公共场所支持无触摸操作设备的系统等等。

我要评论

文明上网,理性发言。(您还可以输入200个字符)

所有评论仅代表网友意见,与本站立场无关。

相关新闻

雅迪永磁同步轮毂电机增程技术鉴定会在苏召开 2020-06-01 16:01:01
2020年5月30日上午,由中国机械工业联合会组织的雅迪电动摩托车永磁同步轮毂电机增程技术科技成果鉴定会在江苏无锡成功举办。
卓达军:雅迪电动二轮车20年有两次重大技术突破 2020-05-30 14:45:01
近日,雅迪集团产品技术研究院技术研发中心首席工程师卓达军先生接受环保在线专访,分享了“雅迪电动摩托车永磁同步轮毂电机增程技术”成功研发背后的故事。
德力工业入驻智能制造网中级榜上有名会员 2019-10-16 16:57:43
公司主要经营电磁阀、气缸、仪表、传感器、电机、变频器等相关产品,主要经营品牌为宝德、费斯托、SEW、ABB、亚德客。

版权与免责声明:凡本网注明“来源:智能制造网”的所有作品,均为浙江兴旺宝明通网络有限公司-智能制造网合法拥有版权或有权使用的作品,未经本网授权不得转载、摘编或利用其它方式使用上述作品。已经本网授权使用作品的,应在授权范围内使用,并注明“来源:智能制造网”。违反上述声明者,本网将追究其相关法律责任。

本网转载并注明自其它来源(非智能制造网)的作品,目的在于传递更多信息,并不代表本网赞同其观点或和对其真实性负责,不承担此类作品侵权行为的直接责任及连带责任。其他媒体、网站或个人从本网转载时,必须保留本网注明的作品第一来源,并自负版权等法律责任。

如涉及作品内容、版权等问题,请在作品发表之日起一周内与本网联系,否则视为放弃相关权利。

不想错过最新资讯?

下载智能制造APP

一键筛选来订阅

信息更精准

图说智能 更多


关于我们|本站服务|会员服务|商站通服务|旗下网站|友情链接|诚聘英才|意见反馈|热词搜索|频道

智能制造网 - 工业4.0时代智能制造领域“互联网+”服务平台

Copyright 2020 gkzhan.comAll Rights Reserved法律顾问:浙江天册律师事务所 贾熙明律师

客服热线:0571-87756395采购热线:0571-87759926媒体合作:0571-89719789

客服部:采购部:编辑部:展会合作:市场一组:市场二组:

关闭