谷歌的新Project Gameface将让你通过在屏幕上做脸来控制光标

发布时间:2024-05-16 11:01:33 栏目:科技

    导读 谷歌在 2023 年 I/O 大会上推出了其最新创新产品 Project Gameface。这项开源技术允许用户使用头部运动和面部手势来控制计算机的光标...

    谷歌在 2023 年 I/O 大会上推出了其最新创新产品 Project Gameface。这项开源技术允许用户使用头部运动和面部手势来控制计算机的光标,从而使游戏和其他任务更容易完成。兰斯·卡尔(Lance Carr)是一位患有肌肉萎缩症的四肢瘫痪的视频游戏主播,受到其故事的启发,谷歌与他合作,开发 Gameface 项目。兰斯的病情削弱了他的肌肉,使传统的鼠标控制变得困难,因此谷歌旨在创建一种免提解决方案。

    通过抬起眉毛来点击和拖动,或者张嘴来移动光标等面部表情,用户可以轻松地导航他们的设备。这项技术对残障人士尤其有利,为他们提供了一种与 Android 设备交互的新方式。

    Gameface 项目的开发遵循三个核心原则:为残疾人提供操作设备的额外方式、确保广泛使用具有成本效益的解决方案以及优先考虑用户友好性和定制性。

    谷歌与 playAbility 和 Incluzza 合作,开源了 Gameface 项目的更多代码,允许开发人员将该技术集成到各种应用程序中。例如,Incluzza 是一家支持残疾人的印度社会企业,它探索在教育和工作环境中使用 Project Gameface,例如输入消息或寻找工作。

    “我们很高兴看到像 playAbility 这样的公司在其包容性软件中使用 Project Gameface 构建块,例如 MediaPipe Blendshapes。现在,我们正在为 Gameface 项目开源更多代码,以帮助开发人员构建 Android 应用程序,让每台 Android 设备都更易于使用。通过设备的摄像头,它可以无缝跟踪面部表情和头部动作,将其转化为直观和个性化的控制。开发人员现在可以构建应用程序,用户可以通过自定义面部表情、手势大小、光标速度等来配置他们的体验,”谷歌在其博客文章中表示。

    该技术的工作原理是通过设备的摄像头跟踪面部表情和头部运动,并将其转化为个性化的控制命令。开发人员可以通过调整手势大小、光标速度等来定制体验,为用户提供量身定制的交互。

    谷歌还推出了适用于 Android 设备的虚拟光标,扩展了 Project Gameface 的功能。利用 MediaPipe 的面部标志检测 API,光标跟随用户的头部运动,而面部表情则触发操作。开发人员可以访问 52 个面部混合形状值,从而实现广泛的功能和自定义选项。

    总体而言,Project Gameface 的目标是让技术对所有用户更具包容性和易用性,无论其身体能力如何。通过让残疾人能够通过自然的动作控制他们的设备,谷歌正在为更具包容性的数字未来铺平道路。

免责声明:本文由用户上传,如有侵权请联系删除!