编者注:本文归于《解码 AI》系列栏目,该系列的意图是让技能更简略易懂,然后解密 AI,一起向 NVIDIA RTX PC 和作业站用户展现全新硬件、软件、东西和加快特性。
AI 为核算范畴带来了深远的改动。尽管最近的焦点是生成式 AI,但多年来,由 NVIDIA RTX 供给支撑的 AI 加快东西也在改进游戏、内容创作和作业效率方面起到了关键作用。
一直以来,要完成高质量的直播,就离不开贵重硬件的支撑。许多主播常用 x264 软件库的软件 CPU 编码,而这一般会影响游戏质量。这便导致许多主播运用双 PC 设置:一台 PC 专心于游戏和内容,另一台担任串流编码。这种设置拼装起来很杂乱,还很难进行毛病扫除,并且其价格关于新人主播来说一般过于昂扬。
NVENC 可应对以上问题。它是 NVIDIA GPU 上的专用硬件编码器,担任处理音视频编码,以便开释体系的其余部分来专心于游戏和内容的功用。Open Broadcaster Software (OBS) 等职业抢先的直播运用正在添加对 NVENC 的支撑,为 Twitch 和 YouTube 等抢手平台上的新一代主播铺平道路。
一起,NVIDIA Maxine 还可协助处理设备贵重的问题。它包含免费的 AI 赋能功用,例如虚拟绿幕和根据网络摄像头的增强实际追寻。有了这些功用,用户便无需运用物理绿幕或动作捕捉套件等特别设备。主播们在 2019 年的 TwitchCon 大会上初次体会到了上述绿幕技能,他们运用 GeForce RTX 2080 GPU 上的 AI 加快绿幕,在展厅中现场测验了该绿幕在 OBS 上的作用。
NVIDIA Broadcast 供给各类 AI 赋能功用,可提高各种用例中的音频和视频质量。它易于运用,适用于任何其他运用,并且设置起来十分简略。
●噪音和回声移除:只需点击一个按钮,即可让 AI 消除麦克风和输入音频中剩余的布景噪声。
●虚拟布景:经过布景去除、替换和含糊处理等功用,用户无需运用价格不菲的设备或杂乱的照明安置即可自定义布景。
●目光触摸:AI 可让主播看起来像是在直视摄像头,即使他们正在看向别处或记笔记。
●主动聚集:实时动态追寻目标的移动,不管移动目标坐落何处,均可主动裁剪和缩放画面,以跟拍目标。
●虚光作用:AI 可对摄像头图画的旮旯运用暗化作用,以供给明显的视觉比照,然后将观众的注意力吸引到视频中心,一起添加风格特征。
NVIDIA Broadcast 技能中的一切 AI 赋能技能也能以软件开发套件的方式供给给运用开发者。视听技能公司 Elgato 在其 Wave Link 软件中添加了 Maxine 的 AI 音频噪声移除技能,而 VTube Studio (一款抢手运用,用于将 3D 模型连接到网络摄像头,以便运用动画人物进行直播) 则供给了能够不要钱下载的经 RTX 加快的模型追寻器插件。独立开发者 Xaymar 在其 VoiceFX 插件中运用了 NVIDIA Maxine。
Twitch 知名主播 Mr_Vudoo 表明:“我最常运用的是视频降噪和布景替换功用。目光触摸功用很风趣,老实说,这项功用的作用让我感到惊喜。”
YouTube 频道 PiXimperfect 的主持人 Unmesh Dinda 在极点情境下演示了 NVIDIA Broadcast 的噪声消除和回声移除 AI 功用。他将一台呼呼作响的电风扇正对麦克风,还戴上头盔并让人继续敲击头盔。即使布景中充满着很大的噪声,在翻开 NVIDIA Broadcast 运用的噪音消除功用后,Dinda 的声响仍然明晰可闻。这段视频的观看次数已超越 1200 万次。
关于日益增多的长途作业人员来说,NVIDIA Broadcast 运用也是一款有用的东西。Toms Hardware 网站的总编 Avram Piltch 在一篇文章中具体的介绍了他对这款运用的降噪功用的测验,测验目标包含呼呼作响的空调、修剪草坪的街坊,甚至一个发脾气挥舞着机器人的孩子。NVIDIA Broadcast 的 AI 音频作用每次都能大显身手:
Piltch 表明:“我让我八岁的孩子在我死后伪装发脾气,当我启用噪声移除功用后,每一声我不去睡觉的诉苦都消失了(至少在录制内容中是这样)。为添加挑战性,咱们让他一边发脾气,一边拿着一辆嗡嗡作响的机器人轿车走来走去。这一次,NVIDIA Broadcast 仍然移除了一切剩余的声响。”
NVIDIA Broadcast 的 AI 赋能布景去除功用也能够在日常情境中发挥作用,例如与医疗专业技能人员进行视频通话。
欢迎在任何搭载 RTX 的台式电脑或笔记本电脑上免费下载 NVIDIA Broadcast。
请订阅《解码 AI》时势通讯,咱们每周都会将新鲜资讯直接投递到您的收件箱。
