多模态感知与虚实交互

将摄像头、手势、旋钮、实体道具、书页与灯光等输入输出连接起来，研究更自然、可识别和可维护的交互方式。

研究动作识别、物体轮廓识别、编码器角度输入、书页识别、近红外定位和灯光联动。以隔空取件、投影餐桌、翻书设备与三点定位等项目验证实体动作和数字反馈之间的映射。

建议围绕环境光、遮挡、多人干扰、延迟与误触建立测试样本。红外识别须验证波段、材料与相机匹配，灯光控制须确认协议与设备兼容性；定位精度以样机实测为准。

• [VR 大空间](/research/projects/room-scale-vr-rd)
• [弓弩竞猎互动](/research/projects/crossbow-interaction-rd)
• [投影互动餐桌](/research/projects/projection-dining-table)
• [隔空取件：帛书查询交互](/research/projects/gesture-manuscript-browsing)
• [常德米粉制作互动](/research/projects/changde-rice-noodle-interaction)
• [怀化织锦音乐互动](/research/projects/huaihua-brocade-music)
• [科创基地发光树](/research/projects/programmable-light-tree)
• [AI 美妆与肤况可视化互动](/research/projects/ai-beauty-visualisation)
• [傩戏换脸机](/research/projects/nuo-theatre-face-effects)
• [安化黑茶气味互动装置](/research/projects/anhua-tea-scent)
• [漆器伴手礼生成机](/research/projects/lacquer-souvenir-generator)
• [天文占盘推演仪](/research/projects/historical-astronomy-dial)
• [云纹漆鼎拼合解谜](/research/projects/cloud-pattern-lacquer-puzzle)
• [手捧花手势互动](/research/projects/flower-tribute-gesture)
• [电报发射交互](/research/projects/telegraph-interaction)
• [翻书互动集成化设备](/research/projects/integrated-interactive-book)
• [激光三点定位交互](/research/projects/three-point-infrared-tracking)

依据《2025研发计划框架》第 8、32–33、38–43 页归纳。本方向是对原材料的主题整理；框架提出“文化 IP＋模块化技术”，并以大型、中型、小型互动产品组成组合目标。这里列出的验证事项为整理建议，不代表已经完成或已经排期的承诺。