此前,该功能仅支持通过摄像头识别现实世界的物体。如今,视觉智能已能够分析屏幕上的内容。用户不仅可以就当前所见向ChatGPT提问,还能通过Google、Etsy等支持的应用搜索类似商品和信息。
视觉智能可识别应用内的具体物品,例如,用户在应用中选中一盏台灯,系统便可帮助在线查找相似商品。此外,系统还能检测屏幕上的活动信息,并建议将其添加至日历,同时自动提取相关日期、时间和地点。
启用该功能的方式非常简单:用户只需按下与截图相同的按键组合。随后,既可以选择保存或分享截图,也可以通过视觉智能进一步探索相关内容。
此次更新实际上让视觉智能成为iPhone系统级的通用搜索与操作工具。苹果表示,该功能延续了Apple Intelligence的本地处理理念,在为用户跨应用提供语境化智能辅助的同时,保障隐私安全。