学院新闻
    首页 - 学院新闻 - 正文

    【学生项目】穿戴设备为盲人安上智能眼

    作者:记者团 余璐遥编辑:庞秀梅发布:2014-11-20点击量:

    作品名称:穿戴式盲人辅助系统

    主要完成人:武帅吴双王麒炎

    关键词:盲辅系统语音交互特征点匹配光学字符识别

    不用借助拐杖和导盲犬可正常行走,轻松阅读非盲文书籍,随心所欲听音乐、“看”新闻,甚至是独立生活。让盲人不盲,只需要一副装有摄像头的墨镜、一个降噪耳麦、一个云端数据库就可实现。

    今年七月,在上海举办的2014年英特尔杯大学生电子设计竞赛嵌入式系统专题邀请赛中,我校电子电工科技创新中心的武帅、吴双、王麒炎三人研发的穿戴式盲人辅助系统荣获二等奖。该系统是其团队在指导老师尹仕的支持下,历时1年多研发的产品。

    穿戴式盲人辅助系统由摄像头、耳机、基于Intel Atom的嵌入式开发板三部分构成。是一款以Windows 8.1为开发平台,在开发Microsoft Speech SDK和科大讯飞语言开放平台实现语音交互下,结合图像处理技术、光学字符识别技术等,完成多项功能的盲辅系统产品。

    通过对视图信息的处理,盲人只需带上眼镜一样的智能系统,便可识别物体并进行定位导航。它旨在给盲人或者视力疾病患者提供一套可以弥补视觉缺陷且交互友好的系统。

    整个智能系统采用全语音交互系统,任何操作都是通过语音的操控来实现的。盲人使用按钮打开设备后,整个系统自动运行,盲人用户只需发出相应的语言指令就可以实现物体识别与学习、光学字符识别等主要功能,播放音乐、闹钟备忘录、语音上网、智能机器人聊天等娱乐功能。

    比如想要了解有关世界杯的新闻,只要对着麦克风说:“搜索新闻、世界杯”,系统就会飞速查找关于世界杯的最新讯息,以语音播报的形式将整条新闻读给盲人听。当盲人想听音乐解乏时,直接下“播放音乐,‘歌名’”的指令,歌曲旋律立刻就会传入耳中,如果声音太大,还可以调整音量,或者点“下一首”歌。添加备忘录、查询天气、百科问答、智能聊天等均只要下简单的语音指令,系统会自动为你完成。

    对于盲人来说,最大的难题之一就是阅读。目前市面上有许多文字识别的工具,但或多或少都有一些不方便的地方。穿戴式盲人辅助系统尝试仅从机器视觉角度解决文字识别。阅读时,将书籍放在摄像头前,利用对摄像头捕捉到的信息进行处理完成文字识别,并转换成声音的形式完成对文章的阅读。目前,可识别汉字和英文两种文字。

    “该产品识别速度快,辨识率高,可为盲人提供一定程度上的室内导航,帮助其寻找物品甚至能够支持用户自立生活,享受生活。”武帅表示,团队还将进一步研究,以达到设备更轻便,功能更多的最佳效果。

    Copyright © 华中科技大学启明学院 版权所有