结合当前已有的DMS/OMS摄像头,设计了一套完整的注册、识别流程,实现了舱内FacelD融合处理,覆盖舱内主副驾驶和二排乘客。同时系统提供账户服务接口,包括位置信息+账户信息,支持上层业务的匹配调用,为全舱智能能多场景能力提供了更多可能性。
DMS和OMS的视觉融合,多场景识别能力业界领先
隐私数据不上云,多重加密保存至本地加密分区,深度保护用户隐私。深度支持人脸识别模型升级,常用常新。利用人脸识别能力异构部署,多芯片算力共享,算法服务运行流畅不卡顿。
多模态AI技术接入助力 NOMI 能力再进化
通过融合多模感知的能力和全舱账号体系的画像信息,NOMI”能听、会看“才会更”贴心、懂你“。多模感知是Nomi的眼睛,全舱账号是Nomi的记忆。用户和Nomi相互认识后, Nomi就会记住用户,在正确的时间,更有温度的和用户打招呼,送上更贴切的问候,更精准的完成用户交代的任务。
◆打通全账号体系,丰富的场景拓展
提供丰富接口供相关应用供调用,如获取车上可识别的人数及每个识别到的账号信息,以支持主副驾同时使用媒体等功能。
增加乘客账号和虚拟账号类型,方便没有NIO ID的乘客来使用全舱功能。
重视隐私
针对全舱账户体验的隐私合规,我们会对用户进行充分告知以保护用户权益,用户授权同意后才可开启相关功能。功能层?我们做到了用户可选择可关闭,用户可自主录入、管理和删除面容信息。录入的面容信息仅加密存储在本地,不会上传云端,以充分保护用户隐私安全。
功能介绍:
自定义昵称:上车时,NOMI 给你专属的问候;称呼指代:基于昵称让 NOMI 替你代劳,而不是冷冰冰的“副驾”、“后排”称呼;比如:帮“王总”开?下座椅按摩;比如,给“乐乐”的窗户开一条缝;比如,提醒“豆豆爸爸”下车的时候带手机。亲朋好友的偏好全记得:至多存储18个独立乘客账号,可记忆音乐内容以及座椅偏好;比如,打开我喜欢的歌单;比如,调整到我的“风水宝座”;(备注:所有信息都存在车内(本地),不会出车和上云)
◆ MOMI?句话多指令
功能介绍:更强的语义理解能力
实际使用场景下,一句话敞开说,不设数量限制;跨领域支持任务型指令,如“今天天?,导航去三里屯”;融合NOMI的回复表达,简化OSD及界面反馈,简洁清晰;