桌面互动系统利用先进的视觉捕捉设备，获取并识别人手指或其它自然物品在投影屏幕上的位置，通过计算，将手指在投影屏幕上的物理坐标转换为计算机屏幕的逻辑坐标及控制指令。