技术人文 | 米家皮皮灯:无障碍交互新入口

大家还记得Xiaomi 13 Ultra新品发布会结尾

那个俏皮的身影吗?

我们今天就特别邀请到了这位神秘嘉宾3f056078b2d5d784588df9c89ca5d56d.png

米家皮皮灯!

让我们用热烈的掌声欢迎它f54cf097fab972c40d16f53e9699fbe8.pngb2f9a9aad82509ba66d50251f5b6f9bf.png

86196628cdd51ccd4aaf92cad4102103.jpeg

outside_default.png

大家好~我叫米家皮皮灯~

我不只是个台灯,

还是智能陪伴小玩具。

我体型小,本事却不小,

不仅会跟你撒娇互动,

还能看懂你的“小动作”,

听障朋友也对我赞不绝口!

想更了解我吗?

且听我细细道来——

01

聪明有趣的智能台灯

台灯就是直直地立在那?这可不一定,米家皮皮灯就不是这么一个“乖”宝宝。它打破了我们对台灯的既定印象,尝试在灯上搭载了电机模组,让它可以模拟转身、头部摇晃的动作,摇头晃脑,十分灵动可爱。

1abf81cc52c092fd2c4ae613b66c993c.gif

图片:互动状态下的米家皮皮灯

然而,米家皮皮灯可不是乱无章法地蹦跶,在设计过程中,工程师们加入了PAD情感模型的算法。

模型使用了三个维度来展现情感,分别是表现个体情感正负倾向的愉悦度(pleasure)、表现情感激活水平的激活度(arousal)和表现情绪主观控制程度的优势度(dominance)。

配合台灯上的传感器,当我们进行不同频率和类型的人机交互时,这些维度参数就会发生改变,模拟出不同的情感类型,米家皮皮灯也会据此表现出不同的“小情绪”

如果你摸摸它的头,它的愉悦度和激活度随之上升,就会过来蹭一蹭你的手

如果你晃动灯身,的愉悦度和激活度就会下降,米家皮皮灯就会生气地摇头抗议

而优势度作为随机波动的数值,则为米家皮皮灯的表现增添了一些不确定的“个性”。当熬夜赶稿很烦躁时,伸出手来撸撸米家皮皮灯,看着它得意地晃动两下,心情也就随之放松下来了呢。

f49aff2999c8245a19ee43946ec9bb3e.jpeg

图片:米家皮皮灯使用场景

不光是会撒娇,米家皮皮灯还能看懂你的“小动作”。它的无感跟随照明功能,会自动识别你的手在哪里,并且判定双手之间的位置,如此一来不管你移动到哪,光都会跟随到哪,照亮你所需的区域。

而当你想要开灯时,只要向它比出张开手掌的手势;想要调整灯光亮度,也只需要将拇指和食指捏紧或是拉开,米家皮皮灯就能根据你的手势进行反应,直观又轻松地把它玩转于“股掌之间”。

677f6591207ea22d97c97a5e9e411de4.png

图片:利用手势控制灯光亮度

02

看懂的背后,是手势识别技术

而看懂“小动作”的背后,其实是手势识别技术的实践。米家皮皮灯所搭载的手势识别技术,是MediaPipe Hands开源技术。

这个技术的原理是利用摄像头捕捉手掌图像,通过对手掌边界和关节的检测,提取出手掌中21个关键点。再根据对手部模型的学习,预测出手部骨骼的形态

而在经过对关键点和骨骼形态的大量学习后,对于一些被遮挡的手部关键点,机器也可以来推测出其所在的位置。

fe3334cae50924405d6715aa6207fc16.png

图片:手部21个关键点与骨骼线

在识别手部骨骼形态的基础上,再根据每根手指关节累积的角度,机器就可以预估手指的状态,判断其具体是弯曲的还是伸直的。

最终,借由不同手指的曲直形态,机器就可以对应出具体的手势,从而完成对手势的识别。

03

现有技术,全新应用

虽然MediaPipe Hands并不是一个新技术,但米家皮皮灯却是它在灯具品类上的创新亮相

为了让这一功能能在小巧灵活的台灯上运行,小米将手势识别模型进行了轻量化的改进,并对模型进行了进一步的补充训练,增加了超过十万张不同种类的手势图片素材,来提高模型的适用性。这些图片涵盖了老人、小孩等各类群体,让米家皮皮灯能识别所有人的手

此外,由于米家皮皮灯的识别视角以低头视角为主,用户的手与摄像头会有一定的夹角与倒置的情况出现,小米还增补了更多不同视角下的手势素材,通过训练,米家皮皮灯就可以在各种角度下顺利地进行手势识别

73b2381bb00c6cf2fe9fdd4e2dd99428.jpeg

图片:米家皮皮灯使用场景

在此之上,为了进一步提高识别的准确性,小米更在原模型的基础上增加了一个分类器。

当手势被部分遮挡,像是握拳时,摄像头无法完全识别其中的关键点与手指形态。小米的手势识别模型就可以依靠增加的分类器,综合形态对应与分类器识别的结果,选择最靠近的手势来进行决策,从而有效提高识别的准确率。

很多人会担心,那米家皮皮灯有了摄像头,我的一举一动是不是被“监控”了?其实,灯上搭载的摄像头并不具备视频的能力,手势识别模型也为本地运行,不会上传云端。

除此之外,米家皮皮灯还内置有安全芯片,在确保好用的同时,也确保了每个人的隐私安全

04

无障碍交互新可能

米家皮皮灯的手势识别可不只是可以控制台灯本身,还可以借由“1,2,3”的手势,自定义地来控制家庭中的智能家居。这也让米家皮皮灯跳出了传统灯具的范畴,成为智能家居控制的新入口。

在三月份的听障用户交流会《技术人文丨一次不只有声音的对话》中,曾有不少听障朋友们表示:小米的智能家居很好用,但是语音交互的方式对于他们来说并不那么友好

有的伙伴不能发声,完全不能使用语音交互;而拥有病理腔的伙伴在使用语音识别时,也容易因为发音问题而唤醒不了小爱同学。

051e2243f08ba8f1d28f1bf899cce151.jpeg

图片:小米听障用户交流会现场

其实,在目前的智能家居操控上,除了以“小爱同学”语音唤醒手机或音箱,并使用语音操作之外,也能够用文字输入的方式代替语音指令

用户可以在手机上开启小爱同学的“电源键唤醒”,长按电源键一秒即可唤醒小爱同学,再长按小爱同学呼吸图标,就可以输入文字指令。当然,用户也可以选择进入米家App进行操作。

9a4236c56fc63cba5c81304b75836916.gif

图片:小爱同学文字指令输入方式

然而,这种依托于手机的操作,在家庭场景中只能达到“可用”,但远不及好用。

对于听障朋友来说,每次想控制智能设备,还得先找到手机,再进行复杂的点击操作。

听障朋友小顾就说:“四月份我出差入住酒店房间,发现有个语音助手,我当时就想,为什么不能识别我的手势呢?

米家皮皮灯的手势操作正是一个创新的解决方案,只要走到灯前比出对应手势。一个动作,轻松解决

8290fcbb0f535092b31c3c4dd3e36247.jpeg

图片:应用手势识别控制智能家居

除了为听障用户提供新的交互方式,手势识别也降低了家庭场景中语音操作的干扰,当你沉浸在电影中时,不会因为家人的一句“小爱同学,打开空调”而出戏。

从“一句话”到“一个动作”不是一件特别困难的事情,但它所带来的是全新的交互体验,更重要的是,它提醒了我们:永远去探求更好的Plan B

当一个设备只能用语音交互,那它势必会排除了一部分人的便利;但当我们留有文字输入的入口作为Plan B,便可以使所有用户都能够使用;而当我们进一步地完善Plan B的方案,就不仅是让所有人都能使用,还可以对所有人都更好用

看到这里,相信大家已经很了解米家皮皮灯啦~

它除了可爱以外,还提供了更包容的便利性

也欢迎大家在评论区晒出米家皮皮灯的新玩法,或是提出更多对于无障碍的期待

说不准~ 下一个产品就可以实现了呢!

329c0263f7ddb409a0083c1943dd657c.gif

ce06635666f955c5aeff67e64e0cca73.png

猜你喜欢

转载自blog.csdn.net/pengzhouzhou/article/details/130895896
今日推荐