4 月 26 日消息，Adobe 公司宣布了一项革命性的新技术—— VideoGigaGAN，这是一项基于人工智能的视频超分辨率技术，能够将视频清晰度提高 8 倍，视频分辨率从 128×128 提升到 1024*1024。
VideoGigaGAN 技术的发布，标志着视频放大技术的又一重要进步，为视频编辑、增强和修复等领域带来了新的可能性。
新技术的独特之处在于它成功避免了其他视频超分辨率（VSR）方法中常见的伪影和闪烁问题。
Adobe 结合了多种先进技术，包括 " 时间注意力 " 机制、特征传播、抗锯齿技术以及 "HF 穿梭 "（高频特征穿梭）技术，以确保生成的视频既保持时间连贯性又具有高频细节。在增强的皮肤纹理、细毛以及天鹅羽毛等细节上，VideoGigaGAN 表现出了惊人的能力。
如果 Adobe 将 VideoGigaGAN 技术集成到其专业的视频编辑软件如 Premiere Pro 或 After Effects 中，这将为视频制作者提供一个强大的工具，能够显著提升低分辨率镜头的视觉效果。
然而，目前 Adobe 尚未透露是否计划将 VideoGigaGAN 技术商业化或集成到其现有产品线中。
VideoGigaGAN 是基于 GigaGAN 的生成视频超分辨率（VSR）模型，可以生成具有高频细节和时间一致性的视频。
一键提升8倍分辨率，Adobe发布VideoGigaGAN，AI修复旧视频_哔哩哔哩_bilibili
VideoGigaGAN VideoGigaGAN: Towards Detail-rich Video Super-Resolution
Adobe的研究团队发布了一篇关于名为VideoGigaGAN的新型生成式AI模型的论文，我们认为这种技术可能会在未来的产品中推出。VideoGigaGAN的功能是将低质量视频的分辨率提升至原始分辨率的最高八倍，同时不牺牲视频的稳定性或忽视源材料的重要细节。项目网站上有几个演示视频展示了它的能力，比如将一个模糊的128×128像素的瀑布视频转换成1024×1024像素的高清视频。 值得注意的是，这种AI技术在处理细节上毫不妥协。在人物面部上可以看到皮肤质地、皱纹、头发丝等细节。其他演示视频也展示了类似的高质量效果。比如，通过这项技术，你可以更清楚地看到池塘中游泳的天鹅和树上的花朵。可能会觉得关注皮肤的皱纹或羽毛等细节有些奇怪，然而，正是这种级别的细节处理，Adobe这样的公司必须精确掌握，如果他们打算在广泛的范围内实施图像增强AI。 改进的AI技术复杂难懂。 “GAN”在VideoGigaGAN中代表生成对抗网络，这是一种能够创建逼真图像的AI类型。Adobe的版本特别基于GigaGAN，专注于提升生成内容以及真实照片的质量。正如TheVerge所指出的，这项技术的问题在于它在提高视频质量时会引起多种问题，如奇怪的图像失真。为了解决这一问题，Adobe研究人员使用了多种技术。 研究论文解释了整个过程，尽管内容密集，你可以自行阅读以获取完整的信息。基本上，他们引入了“流引导传播模块”以确保视频帧之间的一致性，使用抗锯齿技术减少图像失真，以及“高频特征传输”来补偿细节突然下降。VideoGigaGAN的内容不止这些，但这就是其主要内容。 潜在的应用 我们是否会在即将推出的Adobe产品中看到这一技术，或者作为一个独立的应用推出？很可能——至少我们是这么认为的。 在过去的一年中，该公司一直在重点实施人工智能到其软件中，从推出Firefly到Acrobat的新助手。就在几个月前的Adobe MAX 2023期间，一个被称为Project Res Up的视频增强器在活动中预览，其性能与我们在VideoGigaGAN演示中看到的类似。一部20世纪40年代的旧电影从480×360像素分辨率提高到了清晰的1280×960像素。河中大象的模糊视频变得清晰可见。演示者甚至提到，软件可以将剪辑的质量提升四倍。 公开承认，这只是猜测，但VideoGigaGAN很可能是Res-Up背后的引擎。Adobe的未来产品可能会为人们提供一种将旧家庭视频或低质量视频提升为我们脑海中想象的电影的方式。也许，最近的预览是即将发布的暗示。 VideoGigaGAN仍在深入开发中，因此尚不清楚何时或是否会发布。这项AI在处理超过200帧的视频或渲染小物体时还存在一些障碍，但我们肯定会继续关注。 下载：网页链接
$恒玄科技(SH688608)$ $万兴科技(SZ300624)$
这种AI技术的突破，智能眼镜上的摄像头也不需要太高的分辨率了，大大减低了智能眼镜的功耗。看好类似Meta雷朋智能眼镜的市场需要。
网页链接{聊聊恒玄BES2800的摄像头功能 前文网页链接{(重磅干货)和怒喵李楠聊AI硬件：取代iPhone的可能是耳机、项链、眼镜，“AI手机”不是正确答案 技术... - 雪球 (xueqiu.com)}
网页链接{销量供不应求，Meta雷朋智能眼镜做对了什么 参考：网页链接{超预期： Meta 智能眼镜单季发货超30万副，多家国内供应商受益 Meta 与雷朋（Ray-Ban）联... - 雪球 (xueqiu.com)}