摘要:4:2:2摄像机正在消费级市场日益普及,它能够捕捉到比大多数标准摄像机高一倍的颜色信息。与此同时,生成式AI视频模型的功能与质量均在迅速提升,使全新工具和工作流成为可能。
4:2:2摄像机正在消费级市场日益普及,它能够捕捉到比大多数标准摄像机高一倍的颜色信息。与此同时,生成式AI视频模型的功能与质量均在迅速提升,使全新工具和工作流成为可能。
基于NVIDIABlackwell 架构的NVIDIARTX GPU 包含对4:2:2视频进行编解码的专用硬件,且搭载专为加速AI与深度学习而设计的第五代TensorCore。
为满足这一需求,GeForceRTX 50 系列与NVIDIARTX PRO Blackwell 系列应运而生,为生成式AI、全新AI特性与先进的视频编辑工作流提供动力,加快剪辑与导出速度。
4:2:2成为主流
兼容4:2:210-bit 规格视频的相机正在逐渐普及。
这些相机传统上因成本高昂而仅限专业人员使用,而如今价格正变得越来越亲民,主流厂商已将其定价降至600美元以下。
4:2:2相机能够捕捉两倍于标准4:2:0相机的颜色信息,而原始文件大小仅增加30%。
得益于更亲民的价格,支持4:2:2视频的相机正在日益普及。创作者如今能以更低的入门门槛获得比以往更丰富的相机选项。
标准相机通常采用4:2:08-bit 色深压缩技术,仅能捕获一小部分颜色信息。虽然4:2:0可满足浏览器的视频播放需要,但专业视频剪辑师要求相机具备4:2:2色彩精度与保真度,同时保持合理的文件大小。
4:2:2视频的劣势在于,额外的色彩信息需要更强劲的算力,因而往往导致视频回放出现卡顿。于是许多剪辑师不得不在剪辑前先创建低分辨率的代理文件——这不仅耗时、需要额外存储空间,还会牺牲剪辑中画面的保真度。
GeForceRTX 50 系列新增适用于4:2:2编解码的硬件加速功能,令这一计算难题迎刃而解。RTX50 系列GPU能够实现高达10倍的4:2:2编码加速,并可以75fps 的帧率解码高达8K的视频源,相当于每个解码器可解码10个4K30fps 帧率的视频源。
剪映、万兴喵影和BlackmagicDesign 旗下DaVinciResolve 等热门视频剪辑应用均支持适用于NVIDIA硬件加速的 4:2:2编解码。AdobePremiere Pro 提供解码支持。
NVIDIA硬件上对4:2:2的支持提升了创作可能性。与8-bit4:2:0 相比,10-bit4:2:2 能够保留更多颜色信息,从而为视频剪辑师呈现更精准的色彩还原与更优质的调色效果。
4:2:2能够呈现更精准的色彩还原,从而提升调色效果。
4:2:2支持中提供的额外色彩数据,可显著增强色彩校正与调色阶段的灵活性,实现更精细的调整。经改进的键控功能可以更干净、更精准地从背景提取主体,同时使尺寸较小的键控对象边缘更清晰。
4:2:2能够生成更干净的绿幕视频内容。4:2:2能使视频内容中的文字显示更为清晰。
4:2:2可以在不显著影响画质的前提下减小文件体积,实现画质与存储空间的最佳平衡。
生成式AI赋能的视频剪辑
借助生成式AI模型,视频编辑人员能够快速便捷地生成填充视频、延长片段时长、修改视频风格并应用高级视觉效果,从而大幅缩短制作周期。
WAN或LTXVideo 等主流模型能以更精准的提示词生成更高质量的视频,同时具备更快的加载速度。
借助针对PyTorch的NVIDIACUDA 优化支持,基于NVIDIABlackwell 平台的GeForceRTX 与NVIDIARTX PRO GPU 能够使这些庞大且复杂的模型在PC端本地高效运行。此外,这些GPU中搭载的第五代TensorCore 支持FP4,使开发者和爱好者能够在实现2倍以上性能提升的同时将显存减半。
先进的视频剪辑AI功能
现代视频剪辑应用提供一系列令人惊叹的高级AI功能— 均由 GeForceRTX 与NVIDIARTX PRO GPU 提供加速。
DaVinciResolve Studio 20 现已正式发布,新增全新AI特效,并集成NVIDIATensorRT 以优化AI性能。其中一项全新功能是UltraNR降噪,这是一种AI驱动的降噪模式,能够智能定位并减少视频片段中的数字噪点,以保持图像清晰度,同时更大限度地减少画面柔化。
“魔术遮罩”是DaVinciResolve 中的另一项AI功能,其作用是供用户快速准确地选择和追踪场景中的物体、人物或特征,从而简化创建遮罩和特效的过程。魔术遮罩v2增加了一款画笔,可用于进一步调整遮罩选区,从而使工作流更准确、更快速。
TopazVideo AI Pro 视频增强软件采用Gaia、Artemis等AI模型,可智能将视频分辨率提升至4K、8K乃至16K,在增添细节、提升清晰度的同时尽可能抑制伪影、减少噪点。该软件还得到TensorRT加速技术的加持。
作为首款本地化桌面级视频增强扩散模型,TopazStarlight mini 能够处理传统AI模型难以应对的素材,从复杂的8/16毫米胶片到去隔行扫描的mini-DV视频。该模型以高算力要求为代价提供卓越的质量,这意味着它只能在RTXGPU 上本地运行。
AdobePremiere Pro 最近发布了多项全新AI功能,例如AdobeMedia Intelligence,该功能利用AI分析素材并为剪辑添加语义标签。这让用户能够更轻松、更快速地通过描述内容(包括对象、位置、摄像机角度,甚至转录的口播)找到特定的片段。
Adobe的增强语音功能可通过去除不必要的噪音,使录制的音频更清晰。与MacBookPro M4 Max 相比,增强语音在GeForceRTX 5090 笔记本电脑GPU上的运行速度最高提升至7倍。
专业级剪辑
GeForceRTX 与NVIDIARTX PRO GPU 旨在提供高级视频剪辑工作流所需的算力。
这些GPU包含强大的NVIDIA硬件解码器(NVDEC),无需依赖代理文件,即可实现高分辨率视频素材和多路视频流的流畅播放与时间线快速拖动预览。剪映、万兴喵影、AdobePremiere Pro、DaVinciResolve 和VegasPro 均支持NVDEC。
创意应用在GeForceRTX 50系列以及RTXPRO 5000、4500和4000Blackwell GPU 中均可使用这些额外的编码器,现在还支持4:2:2视频。
例如,创作者可以借助RTX5080 同时导入5个8K30或20个4K30,或者导入10个4K60视频流,在丝毫不影响速度的情况下进行多机位剪辑并预览多个拍摄角度。
GeForceRTX 与NVIDIARTX PRO GPU 笔记本电脑GPU编码器与解码器。
NVIDIACUDA核心能够加速视频与图像处理效果,例如运动追踪、锐化、上采样、转场特效,以及其他计算密集型任务的处理。它们还能缩短渲染时间,支持在剪辑高分辨率视频素材期间进行实时预览,并加速自动校色、对象移除与降噪等AI功能。
在导出时,使用GeForceRTX 50 系列第九代NVIDIA视频编码器的视频编辑人员可以在HEVC和AV1编码上获得5%的视频质量提升(BD-BR),以相同的比特率实现更高质量的导出效果。
此外,最新Blackwell编码器新增超高质量(UHQ)模式,可将HEVC/AV1格式的编码质量再提升5%,且向下兼容GeForceRTX 40 系列显卡。
剪映、万兴喵影和DaVinciResolve 也支持多编码器编码,通过分帧编码(将输入帧分割为三部分,由不同NVENC编码器并行处理)或场景并行编码(将视频按图像组分割后,分别发送给不同的编码器进行批量处理),实现最高达2.5倍的导出性能提升。
每周,RTXAI Garage 博客系列都会分享由社区推动的AI创新与内容,面向希望深入了解NIM微服务、AIBlueprint,以及如何在AIPC 和工作站上构建 AI智能体、创意工作流、数字人、生产力应用等的用户。
来源:中关村在线