副深入了解:在 CES 上公开的 GeForce RTX 50 系列支持 FP4,可提供强大的 AI 性能,并配备多达三个视频编码器,支持 4:2:2 色彩格式。除了这些之后,新的 AI 工具可增强直播尝试,DLSS 4 可提高 3D 渲染,NVIDIA NIM 微服务和 Blueprints 则为 PC 上的 AI 强效助力。

近日在 CES 展会上公开了的 GeForce RTX 50 系列台式PC和笔记本PC GPU 将为新一代的生成式 AI 和代理式 AI 内容创作提供助力——为视频、直播、3D 等领域带来新的工具和功能。

GeForce RTX 50 系列 GPU 基于 NVIDIA Blackwell 架构,和上一代相比,运行创意生成式 AI 模型的速度可提高至 2 倍,且内存占用更少。该系列 GPU 配备第九代 NVIDIA 视频编码器用于顶级视频编辑和直播,并搭载 NVIDIA DLSS 4 和高达 32 GB 的显存,以应对大型 3D 项目。

https://images.nvidia.cn/cn/youtube-replicates/VVWXFHEhWV0.mp4

这些 GPU 伴随多个软件更新,包括两个新的 NVIDIA Broadcast AI 特效、RTX Video 和 RTX Remix 的更新,以及 NVIDIA NIM 微服务——预先打包和优化的模型,旨在促进 RTX AI PC 上的 AI 内容创作职业流。。

为生成式 AI 时代而生

生成式 AI 可以为创作者带来惊人的成果,但随着模型的复杂性和规模不断增长,即使在新鲜的硬件上,也很难运行生成式 AI。

GeForce RTX 50 系列增加了 FP4 支持,以帮助化解这一难题。FP4 是一种更低精度的量化方式,类似于文件压缩,可以减小模型大致。和大多数模型默认采用的 FP16 方式相比,FP4 的显存占用差点一半,而且 50 系列 GPU 提供的性能是上一代的 2 倍以上。利用 NVIDIA TensorRT Model Optimizer 提供的顶级量化方式,可以在几乎没有任何质量损失的情况下实现这一点。

例如,Black Forest Labs 的 FLUX.1 [dev] 模型在 FP16 下需要超过 23 GB 的显存,这意味着它只能由 GeForce RTX 4090 D 和专业 GPU 提供支持。在 FP4 下,FLUX.1 [dev] 仅需要差点 10 GB 显存,因此可以在更多 GeForce RTX GPU 上本地运行。

在 GeForce RTX 4090 D 上采用 FP16 时,FLUX.1 [dev] 模型可以在 18 秒内生成图像,步数为 30 步。而在 GeForce RTX 5090 D 上采用 FP4,只需五秒的时刻即可生成图像。

壹个基于 FLUX.1 [dev]、面给 3D 引导生成式 AI 的最新 NVIDIA AI Blueprint 将作为一项 NVIDIA NIM 微服务提供,让艺术家能够更好地控制文本生成图像。有了这个蓝图,创作者可以运用由手工创建或 AI 生成的简单 3D 模型,并将它们放在 Blender 等 3D 渲染器中引导 AI 图像生成。由 FLUX NIM 微服务,ComfyUI 和 ACGGit 开发的 Blender 插件提供支持的预打包职业流随后可以生成和 3D 场景构图相匹配的高质量图像。

该由 3D 引导的生成式 AI 的 NVIDIA Blueprint 预计将于 2 月通过 GitHub 以一键配置程序的形式提供。

https://images.nvidia.cn/cn/youtube-replicates/6YrEjhSMPBY.mp4

Stability AI 公布其 Stable Point Aware 3D(简称 SPAR3D)模型将于本月在 RTX AI PC 上推出。得益于 RTX 加速,Stability AI 的新模型将有助于革新 3D 设计,提供对 3D 内容的卓越掌控,支持实时编辑并能够在差点一秒的时刻内从单个图像生成 3D 物体。

让每个人都能制作专业级视频

GeForce RTX 50 系列 GPU 实现了 NVIDIA 视频编码器和解码器的代际飞跃,支持 4:2:2 专业级色彩格式、用于 3D 和虚拟现实 (VR) 视频的多视图 HEVC (MV-HEVC) 以及最新的 AV1 超高质量(UHQ)玩法。

大多数消费级相机局限于 4:2:0 色彩压缩,这会减少色彩信息量。4:2:0 通常足以用于浏览器上的视频播放,但无法提供专业视频创作者对视频进行调色所需的色彩深度。4:2:2 格式提供双倍的色彩信息,而原始文件大致仅为原来的1.3 倍,为视频编辑职业流带来了理想的平衡。

https://images.nvidia.cn/cn/youtube-replicates/z4A1G0g41Gk.mp4

由于文件大致增加,解码 4:2:2 视频也许具有挑战性。GeForce RTX 50 系列 GPU 包括 4:2:2 硬件解码支持,每个解码器可解码多达 8 条4K 60 fps视频源,实现流畅的多机位视频编辑。

GeForce RTX 5090 D GPU 配备三个视频编码器和两个视频解码器,GeForce RTX 5080 GPU 包括两个视频编码器和两个视频解码器,5070 Ti GPU 具有两个视频编码器和壹个视频解码器,GeForce RTX 5070 GPU 则包括壹个视频编码器和壹个视频解码器。这些多编码器和解码器配置和更快的 GPU 相结合,使 GeForce RTX 5090 D 的视频导出速度比 GeForce RTX 4090 D  快 60%,是 GeForce RTX 3090 的 4 倍。

GeForce RTX 50 系列 GPU 还搭载第九代 NVIDIA 视频编码器 NVENC,可将 HEVC 和 AV1 编码 (BD-BR) 的视频质量进步 5%,还支持最新的 AV1 超高质量(UHQ) 玩法,在相同质量下实现 5% 的压缩率提高。这些 GPU 还包含第六代 NVIDIA 视频解码器,可将 H.264 视频的解码速度翻倍。

从 2 月开始,NVIDIA 将和剪映专业版、万兴喵影、Adobe Premiere Pro和Blackmagic Design 合作,支持这些技术。

随着 VR、AR和混合现实头显设备的进步,3D 视频逐渐开始流行。最新的 RTX 50 系列 GPU 还支持 MV-HEVC 编解码器,以便在不久的将来解开此类格式。

直播增强

直播需要同时兼顾多项任务,主播需要在玩游戏的同时制作视频节目并保证娱乐效果。头部主播可以聘用制作人和助播来分担职业量,但大多数主播需独自承担诸多职业,且长时刻持续职业。现在,这一状况马上改变。

Streamlabs,罗技旗下的壹个品牌,也是面给内容创作者的直播软件和工具的领先提供商,正在和 NVIDIA 和 Inworld AI 合作打造 Streamlabs 智能直播助手。

Streamlabs 智能直播助手一个 AI 智能体,可以扮演助理、制作人和技术支持的人物。智能助手可以化身 3D 虚拟形象加入直播,回答难题、点评游戏方法或聊天,或发起暖场对话。它可以辅助制作直播内容,在有意思的游戏时刻切换到最相关的场景并播放音频和视频提示。它甚至可以作为 IT 助手,帮助配置直播并化解难题。

Streamlabs 智能直播助手由 NVIDIA ACE 技术(用于创建数字人)和 Inworld AI(用于实现代理式 AI 尝试的 AI 框架)提供支持。该助手将于现在晚些时候推出。

数百万用户已运用 NVIDIA Broadcast 应用程序将办公室和宿舍变为家庭职业室,通过运用 AI 功能进步音频和视频质量,而无需昂贵的专用设备。

两个新的 AI 赋能的测试版特效将添加到 NVIDIA Broadcast 应用程序中。

第壹个是 Studio Voice 音棚音效,它可以增强用户麦克风的声音,使其和高质量麦克风相媲美。。另壹个是 Virtual Key Light 虚拟补光,可以从头照亮用户的面部,使光线均匀分布,营造出如同两盏灯充分照亮的效果。

由于这两个测试版功能运用了性能标准较高的 AI 模型,因此提议用于视频会议或非游戏直播,并运用 GeForce RTX 5080 GPU 或更顶级别的 GPU。NVIDIA 正力求在未来的更新中将这些功能扩展到更多 GeForce RTX GPU。

NVIDIA Broadcast 应用更新还包括最新的用户界面,允许用户同时启用更多效果,以及对噪音消除、虚拟背景和目光接触效果的改进。

更新后的 NVIDIA Broadcast 应用程序将于 2 月推出。

https://images.nvidia.cn/cn/youtube-replicates/-PThMLe6UgY.mp4

主播同样可以受益于 NVENC——在 OBS 的 Twitch 增强直播功能的新鲜测试版中,HEVC 和 AV1 的 BD-BR 视频质量提高了 5%,而且用于在 Discord 或 YouTube 中直播的 AV1 编码器也有所改进。

RTX Video 一个 AI 功能,可通过视频超分辨率(VSR)和 HDR 增强 Google Chrome 和 Microsoft Edge 等常用互联网浏览器,以及本地播放器的视频播放效果。该功能将获取更新,可将 GPU 的运用率降低 30%,从而扩大能够以更高质量运行视频超分辨率的 GeForce RTX GPU 阵型。

RTX Video 更新将在未来的 NVIDIA App 版本中提供。

前所未有的 3D 渲染性能

GeForce RTX 5090 D GPU 提供 32 GB GPU 显存,是历代 GeForce RTX GPU 中显存最大的型号,比 GeForce RTX 4090  D GPU 提高了 33 %。这使得 3D 艺术家能够在同时运用多个应用程序的同时,构建更大、更丰盛的全球。除了这些之后,最新的 RTX 50 系列第四代 RT Cores 可以将 3D 应用程序的运行速度提高 40%。

DLSS 4 第一次引入多帧生成功能,运用 AI 为每个渲染帧生成最多三帧来进步帧率。这使得动画师能够以多达 4 倍的帧数流畅地操作场景,或以 60 fps 或更高帧率渲染 3D 内容。

https://images.nvidia.cn/cn/youtube-replicates/qQn3bsPNTyI.mp4

D5 渲染器和 Chaos Vantage 这两款深受建筑师和设计师欢迎的专业级 3D 应用程序将于 2 月增加对 DLSS 4 的支持。

3D 艺术家们已采用生成式 AI 来进步生成 3D 网格模型、HDRi 地图甚至动画的效率,以进行场景原型设计。在 CES 上,Stability AI 公布了最新的 3D 模型 SPAR3D,它可以在 RTX 加速的支持下在几秒钟内根据图像生成 3D 网格模型。

NVIDIA RTX Remix 一个 MOD 平台,允许 MOD 制作者捕捉游戏资产,利用生成式 AI 工具自动增强材质,并加持全景光线追踪来创建令人惊艳的 RTX 重制版——支持 DLSS 4,提高图形保真度和帧率,最大限度地进步游戏经过中的真正感和沉浸感。

RTX Remix 将支持 Neural Radiance Cache,这是一种运用 AI 对实时游戏数据进行训练并精确估计每像素间接光照的神经着色器。借助 RTX Skin,RTX Remix MOD 有望为人物带来前所未有的逼真度,由于光线将通过人物的皮肤反射和传播,使其和周围环境更为融合。借助 RTX Skin,RTX Remix MOD 有望为人物带来前所未有的逼真度,由于光线将通过人物的皮肤反射和传播,使其和所处的全球更为融合。

GeForce RTX 5090 D 和 5080 GPU 将于 1 月 30 日开始发行,随后 GeForce RTX 5070 Ti 和 5070 GPU 将于 2 月推出,RTX 50 系列笔记本PC将于 3 月上市。

全部配备 GeForce RTX GPU 的体系,均可尝试 NVIDIA Studio 平台带来的优化,包括 130 多个 经 GPU 加速的内容创作应用,以及经过广泛测试并每月更新的 NVIDIA Studio 驱动,该驱动可为用户增强热门创意应用程序的性能并最大限度地进步其稳定性。

敬请关注 GeForce RTX 50 系列的更多更新。详细了解 GeForce RTX 50 系列怎样增强游戏尝试,并查看 NVIDIA 在 CES 上的全部公开内容。

每月,NVIDIA Studio 平台为创意应用程序更新和优化提供支持。

请参阅有关软件产品信息的声明。

决定因素词：

收藏：

同享到：