郭俊修，柳有权，王松雪

基于普通纸笔的投影交互方法研究

郭俊修，柳有权，王松雪

(长安大学信息工程学院 陕西 西安 710064)

投影交互使交互空间不再局限于屏幕，与其他方式相比具有更好的用眼舒适度，能够实现丰富的交互效果，而笔式书写交互则有着与生俱来的自然性和高效性。结合二者优点，提出了一种基于普通纸笔的投影交互方法，通过普通纸笔与计算机进行交互，摄像头用于采集手写内容，投影仪则用于识别效果呈现。另外，通过卷积神经网络(CNN)和KNN结合使系统可自动适应用户的手写风格，提高了针对不同用户的手写体识别率。在此基础上，针对教育领域设计了单词拼写和算式计算2个典型应用。经实验和用户调查，该交互方法与其他交互方法相比，更舒适自然，具有较强的实用性。

普通纸笔；投影交互；手写体识别；笔式交互

人机交互是实现用户与计算机之间进行信息交换的通路[1]。广泛应用的基于鼠标键盘的交互借助了鼠标键盘完成了信息从用户到计算机的流动，然而给用户带来了学习鼠标键盘使用的负担；其次，在交互过程中形成了显示器向用户、用户向鼠标键盘以及鼠标键盘向显示器的信息流通冗余环路，大大影响了交互过程的直观性和主动性。基于触屏的交互较好地解决了上述问题，但存在着“胖手指”问题，即由于用户手指相对于UI控件臃肿而导致的误触、遮挡等问题，且将交互过程局限在屏幕上，一定程度上限制了人机交互的自由性。……