本實用新型公開了一種用于操控機器人的手持人機交互設備,包括手持架、姿態測量器,所述手持架內包括單片機,所述手持架外圍設有標記,所述姿態測量器對標記進行測試實現位置及姿態測試;所述手持架中設有模式切換裝置,所述模式切換裝置與單片機電連接,所述單片機包括有IMU慣性測量單元。本實用新型通過借助小巧的手持式設備,在手持架上設置標記點,然后利用姿態測量器準確獲取設備的6自由度空間運動,然后利用外設的機械手控制器,通過運動映射算法可以完整的對控制機器人多自由度(典型為6自由度)進行全方位控制;同時,增加IMU慣性測量單元,避免標記點的觀測結果因挑面引起大的跳變,因此從安全性和準確性上,本設計都更為合理。