书生·浦像 – 上海AI Lab 联合港中文和浙大推出的超高动态成像算法

书生·浦像是什么

书生·浦像是上海人工智能实验室联合香港中文大学、浙江大学等机构研发的超高动态成像算法，核心为浦像HDR（UltraFusion HDR）。算法结合了AIGC技术和HDR技术，通过曝光融合与生成式大模型，能在曝光差异高达9档的极端条件下，修复图像细节，生成高质量图像。有效解决了动态场景下的运动伪影问题，适用于摄影、手机成像和自动驾驶等领域。

书生·浦像的主要功能

• 超高动态范围成像：通过AIGC技术与HDR的结合，能够在曝光差异高达9档的极端条件下，修复图像细节，生成高质量图像。
• 动态场景处理：有效解决动态物体运动伪影问题，适用于复杂光照条件下的成像。
• 多曝光融合：支持任意曝光输入，能将不同曝光度的图像融合为一张色彩鲜艳、细节丰富的高质量图像。

书生·浦像的技术原理

• 多曝光融合与生成式大模型：浦像HDR基于AIGC技术，能处理任意曝光输入的图像，在曝光差异高达9档的极端条件下，依然能修复图像细节，生成高质量的HDR图像。
• 动态场景处理：针对动态场景中的运动伪影问题，浦像HDR采用了创新的多阶段处理流程，有效解决动态物体运动带来的成像问题，确保生成的图像自然且逼真。
• 色调映射与图像修复：算法通过生成式大模型的先验知识，自适应学习色调映射，克服了传统HDR技术在复杂光照条件下的色调不自然问题。引导式图像修复设计框架能够保持生成结果的图像保真度，避免纹理变化问题。
• AIGC技术赋能：AIGC技术为HDR成像提供了强大的生成能力，使算法能在不同曝光水平之间实现高效的融合，显著提升了成像的鲁棒性和色彩饱和度。

书生·浦像的项目地址

书生·浦像的应用场景

• 摄影领域：帮助摄影师修复曝光不足或过曝的照片，无需升级设备即可提升成像质量。
• 手机摄影：有望集成到手机相机中，提升手机在复杂光照条件下的成像性能。
• 自动驾驶：在自动驾驶系统中，浦像HDR可以更好地处理复杂环境下的图像，提高系统的感知能力和安全性。