EN
2022年03月25日研究成果

基于界面语义理解的自然交互技术平台

喻纯团队

        清华大学副研究员、智源青年科学家喻纯构建了以智能感知为基础的自然交互平台,实现了对移动应用界面的语义理解,并利用安卓的无障碍访问开发接口构建了交互代理技术,实现在不修改第三方应用的情况下,重新定义交互界面和交互方法,为智能的多模态人机交互提供了实验和验证的平台。该平台已经随着“慧说读屏”软件完成了内测,并于2020年12月发布。在平台的基础之上,团队进而研发了面向普通消费者和视觉障碍人群的自然交互技术,获得多项全球首创,产生了较好的社会影响力。


喻纯.jpg


  Zihan Wu, Chun Yu, Xuhai Xu, Tong Wei, Tianyuan Zou, Ruolin Wang, Yuanchun Shi. LightWrite: Teach Handwriting to The Visually Impaired with A Smartphone. CHI 2021

Yue Qin, Chun Yu, Zhaoheng Li, Mingyuan Zhong, Yukang Yan, Yuanchun Shi.ProxiMic: Convenient Voice Activation via Close-to-Mic Speech Detected by a Single Microp




分享到: