小米技术 2024年12月03日
技术人文 | 无声的世界里,听见一个响指的力量
index_new5.html
../../../zaker_core/zaker_tpl_static/wap/tpl_guoji1.html

 

文章讲述小米为障碍者提供更包容生活体验的探索。包括视障者等通过简单话语操控家居,听障和语障用户的手势控制探索,以及可穿戴设备实现便捷交互等内容。

视障者等通过简单话语操控家居,如'小爱同学,开启空调'等

推出米家皮皮灯,以手势控制家居,但存在范围限制

推出'打个响指'功能,扩展控制智能家居的物理范围

Xiaomi Watch S4可通过自定义手势操作控制家居,对听障和语障用户更便捷

2024-12-03 09:00 北京

12月3日,不仅是一个日历上的数字,更是一个提醒我们聚焦于障碍者的日子,国际残疾人日。过去我们曾经分享过视障朋友宝亮言语障碍的阿卷渐冻症的小俊等障碍朋友和小米的故事。我们从中发现,障碍朋友们在生活中同样怀揣着对独立、自由与尊严的渴望。因此,我们一边探索,一边也在追问自己,怎么才能为我们的障碍朋友们提供更加包容的生活体验呢

01

改变只是“一句话”的事

让我们先来了解一下障碍者的家庭生活,一提到这个话题,很多人脑中都会出现这样一个画面:障碍者坐在轮椅或者是沙发上,家人围绕在他身边,无微不至地照料着他的各种需求。这个画面温馨而又动人,但却自然而然的将障碍者看成了一位“被照护者”,忽略了障碍者作为独立个体的存在

然而,在实际的生活场景中,障碍朋友早已通过不断的练习和积累,形成了属于他们的生活方式,就像使用可升降的晾衣机,无需起身也能晾晒衣服;使用固定倒量的调料品,不用看也能烹饪出美味的宫保鸡丁。

而在智能家居越来越普及的现况下,视障者更是不再需要摸索遥控器,只需要一句“小爱同学,开启空调”,便可享受徐徐凉风;轮椅朋友也不需要费力穿越桌椅,只需要一句“小爱同学,帮我关灯”,便可倒头就睡。所有家居操控,都化作了简单的“一句话”。这让刻板印象中被视为“被照护者”的障碍朋友们,拥有了独立生活的可能,甚至还能成为家人的守护者。

然而,对于不能说话的听障用户和语障用户来说,这简单的“一句话”却成为了一道难以逾越的鸿沟

(图:视障伙伴李娜与她的孩子)

02

用“手”发声的探索历程

随着语音技术的不断进步,语音识别也越来越精准。但对于完全无法说话,或是带有较浓病理腔的用户来说用语音操控智能家居依然“难如登天”

因此大多数听障用户和语障用户是这样使用智能家居的:拿到手机,点开米家,操作特定的设备。虽然可用,但总归不够直观、便捷

所以,我们开始探索更加包容的解决方案。在经过与听障用户和语障用户的多次交流后,“手势控制”逐渐成为了我们探索的新方向。

在去年的四月,我们推出了“米家皮皮灯”,它不仅是一款智能台灯,更是一个能够理解手势指令的贴心伙伴。我们可以通过“1,2,3”的手势,自定义地来控制家庭中的智能家居。米家皮皮灯的出现提供了一种全新的交互方式,也是我们在支持听障用户和语障用户,不用说话便能操作智能家居使用的创新尝试。(点击链接了解更多:技术人文 | 米家皮皮灯:无障碍交互新入口

(图:米家皮皮灯)

可惜的是,虽然米家皮皮灯脱离了语音和手机的限制,但作为一个台灯,它的手势识别的范围却有限。这意味着,如果我离米家皮皮灯特别远,就必须先走到台灯旁,再做出手势。因此,在从语音交互的方式走向手势交互的大方向上,米家皮皮灯只是一个过渡方案。

因此,我们转变了思路,想着如果不能用嘴发声,那是不是可以用“手”发声呢?在去年十月,我们推出了“打个响指”功能(点击链接了解更多:打个响指,让家闻 “ 声 ” 而应)。我们不再需要唤醒小爱同学,只要在米家 App 中设置好功能的自动化指令,并在Xiaomi Sound音箱方圆3米范围以内,打一个响指,就可以帮助我们操控想要的智能家居。

(视频:Xiaomi Sound音箱响指控制场景)

这不仅打开了智能家居操控的全新想象空间,更是极大扩展了用户控制智能家居的物理范围。但这还不够,我们相信我们能做的,还有很多。毕竟,万一有些伙伴们就是打不出个响亮的响指呢?

03

可穿戴支持,随手随心操控

而随着小米澎湃OS HyperConnect跨端智联的发布,小米全面迈入「人车家全生态」。手机、穿戴设备、车,与智能家居所有设备协同运作,融合构建起一个数据共享的生态系统。这使得我们在探索多元智能家居操控时有了更多不同终端的新可能

我们都知道,音箱和手机已经成为了同一生态设备的控制中心,那畅想看看,还有哪些设备也能够扮演类似的角色呢

与固定在特定位置的灯具和音箱不同,可穿戴可以说是随时随地陪伴在我们身边,这意味着我们不再需要在移动到特定位置就能够完成交互,这可不正是一个极佳的智能家居交互入口吗!那如何实现使用可穿戴设备操控智能家居呢?让我们来看看小米智能家居生态的新成员——Xiaomi Watch S4

Xiaomi Watch S4搭载了全新小米澎湃OS 2,并加入了融合设备中心、自定义手势操作*等功能。这代表着我们无需依赖手机,只要按手表下侧边按键打开控制中心进入融合设备中心,就可以调节家中的灯光、温度。而高度自定义手势操作,也让我们可以直接通过翻转手腕、晃动手腕,甚至是“打个响指”直接控制电视、空调、空气净化器等设备。对于不能出声的听障用户和语障用户而言,这无疑是提供了一个更加便捷、包容的交互选项

(图:Xiaomi Watch S4融合设备中心)

其中“打个响指”作为全新推出的手势操作功能,是通过手表的IMU传感器(惯性测量单元,Inertial Measurement Unit)与小米自研的响指算法来实现。首先我们通过由加速度计、陀螺仪和磁力计等多个组件组成的IMU传感器,检测我们佩戴手表做出各种手势时的物体加速度、角速度和磁场强度等各类运动数据。然后再借由自研响指手势算法,识别出我们做的是打响指这个手势。

而在自研响指手势算法的开发过程中,技术团队意识到,打响指也是一件“有门槛的小事”。因此,在前期的数据训练中,技术团队尽可能地捕捉了各类型响指的动作数据。这其中包含了各种弱声甚至是打不出声音的响指动作,确保训练数据足够包容。

同时,为了提升手势识别的灵敏度与精确度,技术团队在进行IMU信号分析时,会对打不出声的弱信号以及各不同角度的响指手势进行针对性分析与加强。并且,在算法训练过程中,采集了大量办公、走路、玩游戏等非响指动作的数据,进行后处理策略分析,当这些容易误触的场景数据被隔掉之后,响指手势的误触率就进一步降低了。

最后,技术团队在用户交互上也进行了策略调整,让手势算法只有在亮屏的情况下才会运行,这样一方面避免频繁调用识别算法导致手表功耗过高,续航变短;另一方面也避免了用户在不想进行操控时无意触发联动的困扰。

(视频:Xiaomi Watch S4全新手势操作,打个响指)

*融合设备中心需连接支持 Xiaomi HyperOS 2 的手机,并将小米运动健康 APP 更新至最新版本、米家 APP 更新至10.0 及以上版本,对端设备需支持相关功能;手势操作功能存在机型、系统、软件版本等条件限制,详情请参考产品官网。

-

随着科技的不断变化,有时我们会因为科技走的比较快,而不小心落下了一些人。但一个产品的好,可能不在于谁最先用上它,而在于有多少人能用上。从小爱同学语音控制、米家皮皮灯的特定区域手势控制、有声的响指控制,到现在无声的手势控制,我们一直在探索对于不同人群更包容的交互形式

我们始终认为,如果一个交互形式会限定某些人群,这就代表所有人在特定情景下都会无法使用。就像智能家居的场域中,手势控制对于听障用户和语障用户来说是刚需,但却也让生病喊不出小爱同学、不想打扰孩子学习的用户,可以无声地完成智能家居的操控,切实地为所有用户提供了更多交互的可能

因此,我们不难发现,障碍者与非障碍者之间,本来就不存在泾渭分明的界限,生活的复杂多变随时可能让我们在某一时刻陷入 “暂时性障碍” 的情境之中。小米将继续坚持“让全球每一个人都能享受科技带来的美好生活”的愿景,深挖各类使用场景,优化产品交互细节,持续建造更完整的生态,助所有人畅享科技的美好。


END



跳转微信打开

Fish AI Reader

Fish AI Reader

AI辅助创作,多种专业模板,深度分析,高质量内容生成。从观点提取到深度思考,FishAI为您提供全方位的创作支持。新版本引入自定义参数,让您的创作更加个性化和精准。

FishAI

FishAI

鱼阅,AI 时代的下一个智能信息助手,助你摆脱信息焦虑

联系邮箱 441953276@qq.com

相关标签

小米 智能家居 手势控制 障碍者需求 科技美好
相关文章