7.3
深览指数
科技虎嗅·AppSo··AI 生成

OpenAI 买下iPhone 人像模式幕后功臣,要给AI 装上一双新眼睛

OpenAI 以超3亿美元收购了相机技术公司 Glass Imaging,其核心技术 Neural ISP 用联合训练的神经网络替代传统 ISP 流水线,能从 RAW 数据直接输出 RGB 图像,并修复镜头像差等光学缺陷。文章认为,此举的关键不在于“拍出更美的照片”,而在于为 AI Agent 提供更真实、稳定的视觉输入——一张经过AI“凭空补全”的照片可能误导模型做出错误决策。文章还推演,Neural ISP 将重塑 AI 硬件的设计逻辑:未来镜头、传感器与模型将共同设计,硬件不必追求完全消除光学缺陷,可由神经网络在后期修复。适合关注 AI 硬件、计算摄影及智能体落地路径的读者。原文 ↗

核心观点
  • OpenAI 收购 Glass Imaging 的核心目的不是改善拍照效果,而是为 AI Agent 提供真实、稳定、未经生成式“猜测”的视觉输入,因为生成式修图可能引入虚构细节,导致模型错误判断现实。
  • Neural ISP 技术将推动 AI 硬件的“共同设计”范式:未来镜头、传感器、NPU 与模型将在设计初期即协同优化,硬件可容忍部分光学缺陷,由神经网络在成像过程中修复。
  1. 01Glass Imaging 由前苹果计算摄影工程师 Ziv Attar 和 Tom Bishop 创办,两人参与了 iPhone 人像模式的开发。
  2. 02GlassAI 用联合训练的网络将去马赛克、降噪、去模糊、多帧融合以及镜头像差反卷积、传感器串扰校正等步骤合并处理,直接从 RAW 连拍数据输出成品 RGB 图像。
  3. 03GlassAI 的变焦技术已在荣耀 600 系列机型上量产落地,并曾在骁龙 8 Elite Gen 5 参考设备上演示实时 4K 视频处理和 20 倍以上变焦增强。
  4. 04《华尔街日报》透露 OpenAI 以超过 3 亿美元收购 Glass Imaging,但交易尚未得到 OpenAI 公开确认。
  5. 05文章提出 AI 设备需要两种“观看权”:屏幕内观看(理解用户浏览内容与操作上下文)和屏幕外观看(通过摄像头拍摄现实物体、文字、空间关系,供 Agent 决策)。
反方 / 局限
  • Neural ISP 技术虽能恢复真实信息,但其训练依赖特定镜头和传感器的光学特性,跨硬件适配可能需重新训练模型,这对第三方模组或未来硬件升级构成潜在成本与兼容性挑战。
  • 文章描述的“共同设计”场景偏向工程理想,现实中的供应链分工(镜头、传感器、SoC、算法各由不同公司主导)可能使这种一体化协同难以在短期内实现。
8 分钟 · 4 卡片 · 9 资料
读原文 →

前置背景

平行视角

未来推演

延伸追问