体验说|NOMI全舱记忆:认识你、陪伴你、理解你

(吴优 You)2024年01月30日

大家好,我是数字座舱系统体验经理吴优。今天,代表我们「NOMI全舱记忆」团队的小伙伴们,来与大家正式聊一聊。

写在开头

第一次坐上蔚来的车时,就被「女王副驾」的概念吸引。作为副驾,感受到蔚来在照顾主驾体验的同时,也考虑到了乘客的感受。也因为它,彻底改变了我只坐后排的习惯。

后来,喜欢驾驶的我更常出现在了主驾。每每当我在开车,家人、朋友坐在乘客位时,我总是希望给到他们更多的关照。希望他们不用每次都费半天劲连上自己的蓝牙,才能听到自己喜欢的歌;希望他们可以和我一样被NOMI认识,并且热情地打招呼;希望他们可以坐在自己最舒适的位置上,不会因为临时有人坐过,而怎么都调不回自己最满意的坐姿。

在团队优化主驾人脸识别速度时,发现车内智能感知摄像头(OMS)所具备的硬件能力不仅仅可以实现主驾驶的人脸识别,整个座舱都可以很好的覆盖到。于是,数字团队花一个月的时间快速做出了的概念验证产品(POC),配合我们更加聪明、懂我的NOMI,「NOMI全舱记忆」正式立项开工。

认识你 : “嗨 NOMI,你认识我吗?”

一切源于相识。任意位置录入,全座舱自由识别。

在最早立项的时候,NOMI 的体验经理分享过一个用户的故事。用户带着宝宝和NOMI说,“嗨NOMI,记住这是我的宝宝,他叫乐乐”。NOMI 当时还没有学会认识大家,反倒回答了一些答非所问的问题,让用户一头雾水。

今天,我们带着更聪明的NOMI,来和大家“相认”啦。

当驾驶账号为车主时,你可以通过以下三种方式发起认人流程:

NOMI:你可以从座舱的任意位置,对NOMI说:“嗨NOMI,你认识我吗?”;或者也可以向NOMI介绍说:“嗨 NOMI,认识一下副驾/后排”。整个录入过程都支持可见可说,即使是后排的朋友,也不用解开安全带探身去点击屏幕,用语音告诉NOMI 你的选择即可。

专属副驾数字面板:当副驾有人时,你可以直接点击中控屏右上角的头像,展开专属于你的副驾数字面板,完成添加。从此坐在副驾的女王,不仅仅有自己的「女王副驾」,还可以享受自己的「女王数字空间」啦。

  *建议绑定蔚来App账号,体验个性化的媒体体验哦。当然,我们也为没有蔚来App账号的乘客提供了座舱虚拟账号的建立,可以直接点击跳过进行绑定。

除使用蔚来App扫码完成账号绑定之外,还可点击跳过直接完成座舱虚拟账号的建立,无蔚来App账号的乘客也可使用。

车主授权账户页面:所有车内人员都可以被车主在「左上角头像」 - 「授权账户」页面管理、增删,已有用户可以直接点击自己头像,补充自己的面容、昵称信息。

特别的,全舱个性化对于人脸识别的要求有所提高。如果是在Banyan 2.4.0版本之前录入过面容的用户,请务必记得点击「左上角头像」-「我的账户」,完善你的全舱面容。你也可以直接发起认人流程,关联自己的ID,我们将帮你自动完成面容的补录。

原来的主用车人、共同用车人、授权人录入全舱人脸后,均可直接享受所有体验。这次我们新增了「乘客」身份,「乘客」支持完整的记人体验,但不支持驾驶车辆。

为了更好地保障乘客隐私,所有面容信息都多重加密保存在车端,不会上云。除此之外,我们还设置了「用户生物信息自动保护机制」,一旦发现潜在的信息读取事件,将自动全清,保护用户隐私。

陪伴你、理解你:专属副驾数字面板(个性化座椅、媒体)、NOMI代劳、打招呼……

我们结合了媒体与车控,关联了NOMI、账号以及多模感知能力等,为你和家人朋友带来多个个性化数字体验:

NOMI打招呼:NOMI如果认识上车的乘客,就会直接叫出他们的称呼,如「豆豆早」;如果许久不见或频繁相见时,NOMI也会有恰如其分的表达,如「豆豆,回来啦」「豆豆,好久不见」;节日相见时,NOMI会送一段温情祝福;

专属副驾数字面板:当副驾有人并完成认识后,你可以通过专属副驾面板设置自己的偏好:

副驾个性化座椅位置:支持记忆两个专属于自己的副驾位置,再也不用担心自己的位置被其它乘客覆盖了。位置记忆还支持了重命名,女生可以保存专属于自己的「化妆位置」「刷剧位置」。你的设置也可以通过NOMI自由呼唤,如“嗨NOMI,调到我的化妆位置”“嗨NOMI,调到朕的风水宝座”“嗨NOMI,帮本君记住这个位置”。

副驾个性化轻松进出 : 轻松进出功能现在也跟随你的个人偏好了,对于多个家庭成员之间,座椅可以根据每个人的喜好明确动或不动,也也不用再担心习惯的位置被别人调乱了,NOMI会聪明的记住你上次的乘坐姿态,自动为你恢复。推荐大家在NOMI认识你之后,主动开启属于自己的轻松进出吧。

副驾个性化一键舒享 :针对ES6、ES8车型,女王副驾的一键按键支持个性化绑定,一键直达你最喜欢的位置。

全舱个性化媒体:在认识过程中绑定了NIO ID的用户,也可以体验全舱个性化媒体,通过“嗨NOMI,放我收藏的歌”“嗨NOMI,我要听我的歌”,即可快速唤起QQ音乐中你爱听的歌。当然这个操作并不局限于副驾,坐在二排的乘客也同样可以快速触达。

NOMI代劳:你可以基于昵称让NOMI替你代劳,而不是冷冰冰的「副驾」「后排」。如你的小孩叫「乐乐」,你可以说:“给乐乐小朋友开下阅读灯”、“帮乐宝打开座椅按摩”、“乐乐有点冷”。乐乐是个懂事的孩子,他也想着去照顾家人,乐乐同样可以说“帮爷爷开下按摩和加热”“给奶奶放七十年代音乐”“妈妈到公司时提醒她今天要记得开心”“爸爸下车的时候提醒他别忘了拿包”。我们希望给予表达足够的自由度,1个人名,NOMI能理解100+种说法。比如用户称呼为「高启强」,NOMI同样理解「强哥」「高老板」「启强」「高总」「小高」「强子」等都是指他。

一年多的时间,经历了三次准备上线、犹豫、继续打磨。涉及近百人的团队,各个子模块的体验经理、设计、开发、测试、项目的努力和碰撞。我们一直在反复问自己:还有没有什么可以做的更好?我们还可以带来什么?终于在2.4.0和大家见面。

当然,这只是一个开始,我们将持续结合全舱记忆,为大家带来更多有意思的体验。希望可以在这个新年,陪伴你的家人,给你带来再多一点的便捷,给你的日常使用带来小小的惊喜和帮助。

NOMI看书上说陪伴是最美好的事,它意味着这个世界上有人愿意把最美好的东西给你,也就是关爱与时间。

快过年了,NOMI今年有两个新年愿望。第一是有机会认识你的家人和朋友,NOMI想尽自己所能去陪伴大家。第二个愿望更重要,是希望你能有更多时间去陪伴你的家人和朋友,能够见证这些陪伴,本身就是NOMI存在的意义所在。

在Banyan  2.4.0 版本更新上,我们也升级了NOMI的语义理解能力,现在你一口气说多少,NOMI就能完成多少。

欢迎参与话题#一口气挑战NOMI#,用自己的肺活量挑战NOMI!

最后的最后,我与NOMI一起祝大家阖家欢乐,龙年大吉!