位置:成果数据库 > 期刊 > 期刊详情页
基于自然语言表达的目标检测算法
  • ISSN号:1671-4512
  • 期刊名称:《华中科技大学学报:自然科学版》
  • 分类:TP242[自动化与计算机技术—控制科学与工程;自动化与计算机技术—检测技术与自动化装置]
  • 作者机构:[1]山东大学控制科学与工程学院,山东济南250000, [2]国网山东省电力公司电力研究院,山东济南250003
  • 相关基金:国家自然科学基金资助项目(61773239); 山东省自然科学基金资助项目(ZR2015FM007); 山东省泰山学者工程资助项目
中文摘要:

为帮助机器人根据自然语言表达定位环境中的物品,提出一种快速、端对端的基于自然语言表达的目标检测算法:同时训练一个卷积神经网络与一个循环神经网络来学习视觉与文本信息.循环神经网络用于将自然语言编码为向量,卷积神经网络用于获取图片中的区域特征信息.对比图片中的区域特征与自然语言特征,相似度高的即为目标区域.在开源数据库UNC-Ref与G-Ref中训练并测试了该模型,证明了该模型的快速性与准确性.

英文摘要:

To help the robotics localize a target object based on a natural language expression about the target,a fast and end-to-end object detection algorithm based on natural language expression was proposed as follow:a convolution neural network and a recurrent neural network was jointly trained to learn visual and linguistic information.Recurrent neural network was used to encode the natural language expression into a vector representation,and convolution neural network was used to extract the feature of image regions.Comparing those region features to language feature,region with high similarity was the target object.Model was trained in UNC-Ref and G-ref dataset,and showed outperformance in speed and precision.

同期刊论文项目
同项目期刊论文
期刊信息
  • 《华中科技大学学报:自然科学版》
  • 中国科技核心期刊
  • 主管单位:中华人民共和国教育部
  • 主办单位:华中科技大学
  • 主编:丁烈云
  • 地址:武汉珞喻路1037号
  • 邮编:430074
  • 邮箱:hgxbs@mail.hust.edu.cn
  • 电话:027-87543916 87544294
  • 国际标准刊号:ISSN:1671-4512
  • 国内统一刊号:ISSN:42-1658/N
  • 邮发代号:38-9
  • 获奖情况:
  • 全国优秀科技期刊,首届国家期刊奖,第二届全国优秀科技期刊评比一等奖,中国期刊方阵“双效”期刊
  • 国内外数据库收录:
  • 俄罗斯文摘杂志,美国化学文摘(网络版),美国数学评论(网络版),德国数学文摘,荷兰文摘与引文数据库,美国工程索引,美国剑桥科学文摘,英国科学文摘数据库,中国中国科技核心期刊,中国北大核心期刊(2004版),中国北大核心期刊(2008版),中国北大核心期刊(2011版),中国北大核心期刊(2014版)
  • 被引量:21013