苹果最强夜间摄影技术推出:AI从源头提升画质,告别“油画质感”

IT之家 12 月 20 日报道 科技媒体 9to5Mac 今天(12 月 20 日)发布博文报道称,苹果与普渡大学联合开发了一种名为 DarkDiff 的全新人工智能技术,可彻底解决极端弱光环境下的拍摄问题。 IT之家援引一篇博文称,在极低光照情况下,用手机拍摄的照片往往会包含大量噪点。为了隐藏这些噪点,传统算法往往会执行过度的抗锯齿,导致照片细节丢失,产生模糊的“油画”般的感觉。为了解决这个问题,苹果和普渡大学的研究团队宣布了一种名为“DarkDiff”的新人工智能模型。这项工作没有遵循传统的后期修饰思维,而是开创性地“重新利用”预先经过高度训练的相机图像信号处理(ISP)流程,从源头上提高图像质量。 DarkDiff的主要创新在于其干预的时机ns。与成像后 AI 补丁不同,DarkDiff 会在相机 ISP 处理原始传感器数据的早期进行干预。 ISP负责白平衡、显示等基本处理。生成线性 RGB 图像后,DarkDiff 接管降噪和细节生成。这种紧密的集成使人工智能能够理解照片黑暗区域的纹理细节,而不是简单地模糊像素。由于“错觉”问题,生成式人工智能经常伪造图像内容(例如凭空生成物体)。为了避免这种情况,DarkDiff引入了“局部图像补丁注意”机制。0.033秒将DarkDiff处理后的图像与使用长时间曝光(300倍测试图像)在三脚架上拍摄的参考图像进行比较,结果表明DarkDiff在色彩再现和细节清晰度方面均优于现有的Raw升级模型。尽管其结果令人印象深刻,但DarkDiff距离量产还很远。研究人员承认该技术比传统算法慢得多,并且在手机上本地运行它需要大量的计算能力,这会很快耗尽电池。您将来可能需要依赖云处理。此外,该模型在识别黑暗场景中的非英语文本方面仍然存在局限性。这项研究现在表明了苹果在计算摄影领域探索的进一步方向,但可能不会很快直接包含在新的 iPhone 中。参考资料
特别提示:以上内容(包括图片、视频,如有)由自有媒体平台“网易账号”用户上传发布。是的,本平台仅提供信息存储服务。
注:以上内容(包括图片和视频,如有)由网易号用户上传发布,网易号是一个仅提供信息存储服务的社交媒体平台。

admin

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注