Xuanyou Liu - HCI Researcher at Northwestern University

你好,我是

刘炫佑

全闭环人机交互研究者

西北大学(Northwestern University)
计算机科学系 · MU Collective · Jessica Hullman

可穿戴传感触觉技术人机协同决策

关于我

我的研究聚焦于构建人机交互闭环:可穿戴传感、触觉刺激,以及连接两者的智能决策机制。

我目前在西北大学计算机科学系MU Collective攻读研究生学位,师从 Jessica Hullman 教授。我曾研发过让机器读懂身体的可穿戴传感技术,也构建过让皮肤感知机器信息的电触觉交互界面;目前,我专注于研究人类与 AI 如何利用这些信息在不确定性环境下进行协同推理与决策。

在此之前,我曾先后在芝加哥大学 HC-Integration Lab(在 Pedro Lopes 教授指导下)、西北大学 SPICE Lab(在 Karan Ahuja 教授指导下)以及中国科学院软件研究所(在韩腾研究员指导下)担任研究助理。我于宾夕法尼亚大学 GRASP Lab 获得机器人学硕士学位(M.S.E.),师从 Michelle Johnson 教授;本科毕业于西安交通大学工业设计专业,获工学学士学位(B.E.)。

最新动态

  • 2026年3月 论文《MARIO》被 CVPR 2026 Findings 接收
  • 2025年9月 入读西北大学,开始攻读研究生学位
  • 2025年5月 从宾夕法尼亚大学毕业,获机器人学硕士学位(M.S.E.)
  • 2025年1月 论文《Seeing with the Hands》被 CHI 2025 接收

研究方向

人机交互是一个闭环系统:机器感知人类人类感知机器,而两端的智能则决定如何高效运用这些信息。我的研究贯穿这一完整闭环:构建用于读取身体信号的可穿戴传感技术、将信息写回皮肤的电触觉刺激技术,并深入探究人与 AI 如何基于这些通道承载的信息进行协同推理与决策。

EIT for Hand Estimation

感知 · 机器感知人类

基于 EIT 的手部姿态估计

探索将电阻抗断层成像(EIT)作为一种新型感知模态,用于连续手部姿态估计。研究重点在于感知硬件的集成化与小型化,旨在为交互系统提供低功耗、无感(低侵入性)的可穿戴输入方案。

西北大学 电阻抗断层成像 机器学习
Human-AI Interaction - Bayesian rational agent framework for human-AI decision-making

智能 · 人机协同决策

人智交互

探究人与 AI 协同情境下的推理与决策机制,重点关注不确定性信息的传达、AI 辅助决策,以及与人类认知过程相契合的交互界面设计。

西北大学 人智交互 决策
Wearable Haptics

刺激 · 人类感知机器

可穿戴触觉技术

致力于研发紧凑型、高分辨率的电触觉交互界面,通过皮肤通道传递丰富的触感反馈,为可穿戴设备拓展感官增强与新型交互范式。

芝加哥大学 宾夕法尼亚大学 触觉技术 可穿戴设备

发表论文

* 表示共同第一作者

Smartwatch-oriented wrist EIT gesture sensing prototype
UIST 2026 审稿中

面向智能手表的腕部 EIT 手势识别

Xuanyou Liu, Novel Alam, Karan Ahuja

ACM 用户界面软件与技术会议(UIST)

腕部电阻抗成像技术为可穿戴设备提供了一种无需依赖摄像头的非视觉手部感知方案,然而将其无缝融入日常设备形态仍面临技术挑战。本研究探索在常规智能手表表背布局中集成平面电极的设计方案,并通过用户研究系统评估其对手势识别的支持能力。实验结果表明,将 EIT 技术集成到主流可穿戴硬件平台是实现低侵入性输入的一条可行技术路径。
Wrist EIT sensing study with varied arm postures
IMWUT 2026 审稿中

手臂姿态对腕部 EIT 手部感知的影响

Xuanyou Liu, Suril Mehta, Jessie Sheflin, Chenfeng Gao, Karan Ahuja

ACM 交互、移动、可穿戴与普适技术会刊(IMWUT)

腕部电阻抗成像技术能够在无需摄像头的情况下实现隐私保护的手部感知,然而其实际应用效果取决于手臂姿态变化条件下感知质量的稳定性。本研究在不同用户群体、手部配置与手臂姿态条件下采集可穿戴传感数据,系统考察该技术的姿态依赖性。实验结果表明,手臂姿态显著影响感知质量,训练数据中涵盖多样化姿态有助于提升模型对未观测条件的泛化性能。此外,本研究还探索了旨在增强跨用户与跨姿态场景鲁棒性的机器学习优化方法。
MARIO - Multi-sensor inertial odometry with human pose prior for AR tracking
CVPR 2026

MARIO:运动增强的实时多传感器惯性里程计

Yiquan Li*, Taeyoung Yeon*, Chenfeng Gao, Vasco Xu, Xuanyou Liu, Karan Ahuja

IEEE/CVF 计算机视觉与模式识别会议(CVPR)Findings

仅依赖惯性测量单元(IMU)的惯性里程计(Inertial Odometry, IO)为增强现实与可穿戴设备中的人体运动追踪提供了一种轻量级技术路径,然而基于数据驱动的深度学习方法由于缺乏对人体运动动力学的显式建模,易产生累积性漂移误差。本研究提出 MARIO 框架,从原始 IMU 数据中学习人体姿态先验知识,并将其嵌入惯性里程计的状态传播过程,以引入符合人体运动学特性的物理约束。进一步地,本研究构建了面向商用 AR 眼镜平台的轻量级多传感器融合架构,有效整合磁力计、气压计及辅助 IMU 等现成可用的传感信号。在大型人体运动数据集上的系统性评估表明,MARIO 相较于强基线 IO 方法显著降低了位置估计漂移,并在多样化运动场景下展现出更强的鲁棒性,为融合运动学先验与多模态感知策略的无摄像头人体追踪研究提供了新的技术思路。
Seeing with the Hands - Hand-mounted electrotactile display for sensory substitution
CHI 2025

Seeing with the Hands:支持手部交互的感官替代技术

Shan-Yuan Teng*, Gene Kim*, Xuanyou Liu*, Pedro Lopes

ACM 人机交互学会年会(CHI)

感官替代设备使用户能够通过触觉等非视觉感官通道感知视觉信息。然而,现有设备普遍采用头戴式摄像头布局,限制了手部操作过程中的动作协调性。本研究提出从"手部视角"实现"看见与感受"的感官替代范式,以提升该技术的灵活性与表达力。为此,本研究设计了一种手背式电触觉显示装置,将腕戴摄像头捕获的视觉图像实时转化为触觉刺激信号,使用户在执行伸手与悬停等操作过程中感知物体特征。在一项包含明眼人及盲人和低视力参与者的对照用户研究中,本研究系统比较了手部视角与传统头戴式视角在典型操作任务(如物体抓取、精密焊接等)中的表现差异。实验结果表明,两种视角在任务绩效方面无显著差异,但参与者普遍更倾向于手部视角所带来的操作灵活性,因其支持更符合人体工效学的操作策略。
TacTex - High-resolution electrotactile textile interface with woven electrode structure
CHI 2024

TacTex:无缝集成电极的高分辨率电触觉纺织界面

Hongnan Lin, Xuanyou Liu, Shengsheng Jiang, Qi Wang, Ye Tao, Guanyun Wang, Wei Sun, Teng Han, Feng Tian

ACM 人机交互学会年会(CHI)

电触觉刺激技术为高分辨率可穿戴触觉反馈提供了一种颇具前景的技术路径,然而长期以来难以与柔性纺织材料实现良好集成以适应日常穿戴需求。本研究提出 TacTex,一种将高密度触觉反馈与触摸感知无缝集成的纺织基人机界面。通过采用创新性的多层编织结构,利用非导电纱线分隔导电电极阵列,TacTex 实现了 512 × 512 的感知与驱动分辨率,电极间距最小可达 2 mm。配套定制的驱动电路系统能够精确调控电刺激的时空分布特性,并同步监测电压变化以实现实时触摸追踪。技术评估实验与用户研究表明,TacTex 能够呈现包括复杂静态与动态触觉图案在内的多样化触觉效果,为高保真触觉反馈技术在日常服装中的集成应用开辟了新的可能性。

联系方式

欢迎交流

欢迎对人智交互、新型传感与触觉技术、可穿戴计算等方向感兴趣的学者与同行来信交流。无论是探讨科研合作、分享学术见解,还是交流前沿热点,本人均非常期待您的来信。