多模交互智能终端

为了使用户出行便利,尤其对于眼障人士,以语义分析和机器视觉技术为基础,设计了一款多模交互智能终端。整个系统在硬件上主要以树莓派为核心处理器,配合语音处理采集板、摄像头、扬声器、GPS定位模块来实现。软件上采用模块化插件的方式进行设计,综合运用了网络爬虫、语音识别与合成、语义理解、智能对话、天气新闻播报、障碍物检测、路线规划等技术。该系统具有完整的前后端设计,前端提供Web接入、聊天信息查看、障碍物实时查看和地图查看,后端提供后台管理。实际测试表明,该系统具有良好的稳定性和实用性,对于服务视障人士的日常出行具有较强的现实意义。