本发明公开了一种可用于增强现实游戏的可移动式手势交互装置及方法。所述方法具体如下：首先将手势传感器和树莓派安装到增强现实眼镜上，通过树莓派将手势传感器的数据读出并发送到PC端，然后采用坐标系之间的转换关系，将手势的坐标转换到游戏世界坐标。在此基础上，PC端使用区间卡尔曼滤波器和粒子滤波对手势数据进行处理，再将数据发送到增强现实眼镜。此外，利用注册跟踪技术在虚拟游戏世界构建虚拟手模型，增强现实眼镜收到的手势数据用于驱动虚拟手模型。本发明提供了一种自然、直观的交互体验，可以让玩家在大型的场景不受位置和方向影响地使用手势交互，提高了交互的可靠性。