基于眼视线跟踪的打字系统在DM6446 EVM上的实现


大学:  西安电子科技大学
团队成员: 彭弘铭  高静
使用的TI产品: DM6446

项目描述

视线追踪人机交互系统—iTyper是一种采用追踪眼动信息实现人机交互操作,辅助残疾人上机和网络浏览的智能人机交互装置。用户可通过眼睛的注视来替代鼠标和键盘的操作。在DM6446 EVM下使用Codec Engine模块实现ARM核与DSP核的协调工作,ARM核完成眼图的采集、显示以及其与主机之间的通信,DSP核处理眼图并计算视线注视点。主机将视线注视点转换为字符输出到文档中。

其中,DSP端的核心算法采用C与汇编混合编程,经过C与汇编的优化,在DM6446下达到15帧/s。iTyper字符输入速率为每分钟40个,准确率达90%,注视精度在0.5°以内,并且支持一定范围内的头部可动,达到主流视线追踪系统的主要技术指标。

Anonymous
  • 同学你好,我也在用DM系列的芯片,我是做视觉着陆,和你的很像,也是要用到arm和dsp,但是现在只想利用V4L2来实现视觉的采集和LCD上的显示,但是出了一点问题,FMT无法设置,crop也会报错,不知你是否有些经验,我可以发源程序。