产品

苹果揭秘 HomeView 识人流程:最多识别 6 人,原始影像不出安全隔离区

最多识别 6 人:苹果揭秘 HomeView 识人流程,只传“暗号”不传照片

精选理由

家里放个摄像头总让人不踏实,苹果这篇把 HomeView 的处理流程拆得很细:人脸和声音都在安全隔离区里算完,系统只拿到“谁、在哪、把握多大”三个结果,照片录音根本不出去。做智能家居或关心隐私架构的值得看看原文。

苹果 11 月 12 日发布博文,公开了智能家居中枢 HomeView 的人员识别流程,同时介绍了面向 iPhone 18 Pro 和 iPhone 18 Pro Max 的 Secure Exclaves 安全隔离区架构。HomeView 不用 Face ID,而是通过 Center Stage 摄像头面部识别结合语音识别判断在场成员,最多支持 6 位用户,识别前提是用户持有一台支持 Apple Intelligence 的已注册设备且连接家庭 Wi-Fi、处于近期解锁状态。

正文

技术流程分六步:设备启动时,人员识别隔离区从安全存储隔离区加载已登记的人脸、声音模型和身份数据库;摄像头隔离区检测人脸并标记边界框,只向主系统发送“可能有人”的通知,不含任何图像数据;音频经音频隔离区做异常检测和回声消除,同样不向主系统交出录音;随后神经网络引擎隔离区在隔离区专用内存中提取人脸和声纹特征,每个模型运行完毕即清除状态;编排服务将两类特征与身份数据库匹配,输出身份判断和置信度。

最终主系统只能收到三类元数据:人员标识、位置、置信度,原始音视频全程不共享给操作系统。识别结果用于支撑日历、信息、Apple Music 等依赖用户身份的功能,以及 iPhone 上的第三方音视频应用。这种“在隔离区内完成处理、只传出结果”的设计,为家庭常驻摄像头设备提供了一套隐私上更易被接受的方案。

原文 · IT之家

最多识别 6 人:苹果揭秘 HomeView 识人流程,只传“暗号”不传照片

IT之家 11 月 12 日消息,苹果公司今天(11 月 12 日)发布新博文,在介绍适用于 iPhone 18 Pro 和 iPhone 18 Pro Max 的“安全隔离区”(Secure Exclaves)架构同时, 还公开其首款智能家居中枢 HomeView 的人员识别流程。 IT之家此前报道, 在家庭环境下,苹果 HomeView 最多识别 6 位用户,并依据识别结果提供个性化体验。 HomeView 不使用 Face ID,主要通过 Center Stage 摄像头进行面部识别,并结合语音识别判断在场的是哪位家庭成员。 前置条件方面,用户须拥有一台支持 Apple Intelligence 的“已注册个人设备”,该设备需连接至家庭 Wi-Fi,并且必须为最近解锁状态。满足条件后,HomeView 才能通过面部或语音识别该用户。 识别逻辑方面,HomeView 先通过 Center Stage 摄像头和语音先判断“谁可能在场”,再核对该用户的 iPhone 或 iPad 是否连接家庭 Wi-Fi、且近期解锁过。三者匹配后,系统才会将该成员与个性化体验关联起来。 在最新博文中,苹果详细披露了 HomeView 人员识别的内部流程,可以概括为摄像头、麦克风输入 → 隔离区内检测与处理 → 提取人脸、声音特征 → 匹配已登记身份 → 仅向系统返回“谁、在哪、把握多大”。 1. 启动时,先加载已登记用户资料 设备启动后,人员识别隔离区(Person Recognition Exclave)会从安全存储隔离区(Secure Exclaves)中,加载此前登记的人脸、声音识别模型及身份数据库,为后续匹配做好准备。 2. 摄像头发现人脸,但不把画面交给系统 摄像头拍摄的连续画面进入摄像头隔离区,由其检测人脸、标记人脸边界框,并将相关画面排队等待进一步处理。 此时,摄像头隔离区可以通知主系统中的后台进程:“可能有人出现了。”但通知中不包含图像数据,画面仍留在安全隔离区内。 3. 麦克风提供另一条判断线索 音频先经过音频隔离区,完成异常检测和回声消除等处理,再送入人员识别隔离区。 与摄像头类似,音频隔离区也能向主系统报告“可能有人在附近”,但不把音频交给主系统。也就是说,“检测到有人”与“允许系统取得录音”是两回事。 4. 神经网络引擎提取人脸和声音特征 人员识别隔离区随后请求神经网络引擎隔离区加载人脸、声纹模型,生成用于身份匹配的特征。 计算过程中,数据始终保存在隔离区控制的内存中,主操作系统无法访问。神经网络引擎使用隔离区专用的工作队列,每个模型完成运行后,还会清除相关状态。 5. 综合人脸与声音,判断具体是谁 人员识别隔离区中的编排服务,将生成的人脸、声音特征与已登记用户的身份数据库进行匹配,再综合两类识别结果,得出身份判断及其置信度。 这里的“置信度”,可以理解为系统对这次识别结果有多大把握,而不是简单输出一个不带可靠程度的姓名。6. 只把识别结果交给主系统 6、只把识别结果交给主系统 最终,主系统中的人员识别后台进程收到的是三类元数据: 人员标识:识别到的是哪位已登记用户。 位置:人员所处的位置。 置信度:系统对识别结果的把握程度。 在这一人员识别流程中,原始音视频不会共享给操作系统。系统再利用这些结果,支持日历、信息、Apple Music 等依赖用户身份的功能,以及来自用户 iPhone 的兼容第三方音视频应用。 参考 Secure Exclaves and Ambient Sensing

产业坐标与信源核验

本条情报归属 AITOP「产品」核心栏目,重点聚焦北美前沿实验室与硅谷科技巨头。在跨区域产业观察坐标中,该动态直接关联「AI 开发者工具链、Coding Agent 与工程化实践」研究主线,反映出当前技术演进与商业落地的最新风向。涉及核心实体与技术议题包括:HomeView、Apple、Secure Exclaves、智能家居,读者可通过下方标签进入对应专题页查阅历史脉络与关联对比。

信源核验说明:本文原始线索采编自「IT之家」,经 AITOP 多维评分管线结构化提炼。