基于多模态深度融合网络可穿戴式导盲设备  

作　　者：汪家琦 吴泽琨 王一鸣 王书平 丁伊博 

机构地区：[1]东北林业大学机电工程学院,黑龙江哈尔滨150000

出　　处：《科技创新导报》2019年第33期98-102,共5页Science and Technology Innovation Herald

基　　金：“中央高校基本科研业务费专项资金资助”(Supported by the Fundamental ResearchFunds for the Central Universities)2572018BF15;东北林业大学大学生创新训创业练计划项目资助(项目编号:201910225144)。

摘　　要：本文提出一种基于多模态深度融合网络的可穿戴式导盲眼镜设备的设计方案。本方案配备双目采集、红外测距、图像处理、图像识别、语音播报五大核心功能模块,搭建智能导盲眼镜系统的硬件平台,使用RealSence摄像头对场景进行采集,结合深度学习的算法在远程云服务器上完成了对目标场景的灰度处理,投射呈像,最后以处理过的景象对视障人士的行动作出实时的引导,从而有效帮助视力障碍人士更好地识别场景以及对物体进行分类。同时该设备还配有语音播报和测距等其他功能。

关 键 词：导盲设备 双目采集 图像处理 深度融合 信息转换 语音播报 

分 类 号：TP391[自动化与计算机技术—计算机应用技术]