улучшить изображение (и звук)
Видеокарты всех трех поколений RTX вместе с такими приложениями, как NVIDIA Broadcast, приблизили искусственный интеллект к повседневной жизни многих пользователей ПК. Это правда, что с некоторых пор, когда мы говорим об ИИ, первое, о чем мы думаем, это чат-боты, вторые пилоты, создатели изображений и так далее, но мы должны помнить, что задолго до того, как все эти технологии стали популярными, NVIDIA уже предлагала своим пользователям его технология супермасштабирования, основанная на глубоком обучении, DLSS.
Таким образом, у любого пользователя с графическим адаптером GeForce RTX серий 20, 30 и 40 есть устройство, специально способное выполнять задачи, в которых искусственный интеллект играет важную роль. Это, конечно, распространяется и на другие более профессиональные предложения от NVIDIA, но в том аспекте, который касается нас, а именно, конечного пользователя, это, вероятно, была первая технологическая компания, которая знала, как увидеть огромный список возможностей, которые открывает ИИ. мог принести на рынок стол.
Хотя разговоры о NVIDIA и искусственном интеллекте в контексте конечного пользователя приводят нас к размышлениям об играх, правда в том, что его сфера применения намного шире, с такими приложениями, как GauGAN 2, в котором используется генеративная модель, обученная с помощью техники Генеративные противники (GAN) для создания реалистичных изображений из самых простых черновиков, а также текстовых описаний. Или, как в случае, который касается нас сегодня, NVIDIA Broadcast, приложение, которое позволит вам существенно улучшить качество ваших аудио- и видеовыходов, которые будут обрабатываться приложением в режиме реального времени.
Трансляция NVIDIA
Как мы уже говорили вам, когда вышла версия 1.3 приложения, NVIDIA Broadcast обрабатывает сигнал с камеры, микрофона и динамиков/наушников в режиме реального времени, чтобы модифицировать его, добавлять эффекты и улучшать. Как я указывал ранее, для его использования нам нужен графический адаптер GeForce RTX (настольный компьютер или ноутбук), поскольку функции вещания основаны на искусственном интеллекте и, следовательно, требуют специализированных компонентов ИИ, которые интегрируют поколения RTX. Поэтому, если у вас есть видеокарта GeForce GTX или любая модель другого производителя, вы не сможете использовать это приложение.
Его работа, которую мы объясним позже, очень проста. NVIDIA Broadcast будет получать сигналы камеры и микрофона, а также стандартный звуковой вывод системы, обрабатывать их в режиме реального времени и предлагать операционной системе в качестве нового источника аудио и видео. Это, что мы подробно увидим позже, является очень важной деталью, и заключается она в том, что Broadcast — это не приложение для записи видео, проведения видеоконференций и т. д., а приложение, которое находится между устройствами и использованием, которое мы хочу сделать из них., как дополнительный слой.
Выяснив этот момент, давайте посмотрим, что вам нужно, чтобы иметь возможность использовать NVIDIA Broadcast.
Требования к вещанию NVIDIA:
- Графический процессор: NVIDIA GeForce RTX 2060, Quadro RTX 3000, TITAN RTX или сзади.
- Процессор: Intel Core i5 8600, AMD Ryzen r5 2600 или сзади.
- Оперативная память: 8 гигабайт оперативной памяти или больше
- Операционная система: Windows 10 64-разрядная или более поздняя версия.
Таким образом, как видите, речь не идет об особо требовательном к железу приложении. Конечно, имейте в виду, что использование некачественных камер и микрофонов очень негативно повлияет на конечный результат, тогда как более тщательный их подбор обеспечит неожиданные улучшения. Для этого урока мы выбрали камеру Razer Kiyo Pro и микрофон Razer Seiren V2 X, поэтому ниже мы расскажем вам, что вам следует знать об этом тандеме, который благодаря своей цене и производительности делает его действительно оптимальным вариантом для подавляющее большинство пользователей.
Razer Кийо Про
Эта камера, без сомнения, входит в пятерку самых сбалансированных камер для ПК, поскольку она обеспечивает действительно замечательное качество и более чем достаточно функций для нужд пожилых людей по цене, которая делает ее доступной для большинства людей. карманы.
1/2,8-дюймовый сенсор Sony IMX327 STARVIS CMOS Разрешение сенсора 2,1 мегапикселя (1920 x 1080) Шаг пикселя 2,9 мкм Разрешение видеосъемки 1080p при 60 / 30 / 24 кадрах в секунду / 720p при 60 кадрах в секунду / 480p при 30 кадрах в секунду / 360p при 30 кадрах в секунду Угол обзора 80° – 103° Встроенный микрофон Да, всенаправленная подсветка Да, встроенная регулируемая кольцевая подсветка Программное обеспечение Razer Synapse, Razer Virtual Ring Light Подключение USB 3.0 Узнать больше
Официальный веб-сайт
Цена €104,99
Razer Seiren V2X
Хотя Razer Kiyo Pro включает в себя микрофон, который обеспечивает более чем достаточное качество звука для видеоконференций и подобных мероприятий, если вы хотите создавать контент любого рода, лучше всего использовать отдельный микрофон. Razer Seiren V2 X — действительно сбалансированный вариант с отличным качеством звука и конкурентоспособной ценой.
Диаграмма направленности Суперкардиоидная Чувствительность -34 дБ Частота дискретизации 24 бит / 48 кГц USB-подключения Элементы управления Регулятор усиления, кнопка отключения звука и мини-разъем Программное обеспечение Razer Synapse Узнать больше
Официальный веб-сайт
Цена €109,99
Как работает NVIDIA Broadcast и какие эффекты он нам предлагает
Перед тем, как приступить к тестированию многочисленных возможностей NVIDIA Broadcast, важно полностью понять, как работает это приложение, иначе мы столкнемся с ошибочным ощущением, что оно не работает, хотя на самом деле это так. В очень сокращенном варианте можно сказать, что приложение устанавливается между носителем ввода и вывода, чтобы применять его эффекты и исправления.
Таким образом, мы должны учитывать, что NVIDIA Broadcast становится источником, который мы должны выбрать для использования уже обработанного сигнала. И, с другой стороны, если мы хотим внести какие-либо предыдущие корректировки во входной сигнал с камеры или микрофона, нам придется применить эти корректировки с помощью Razer Synapse к сигналу, который позже будет доставлен на NVIDIA Broadcast. Это не сложно, но надо всегда учитывать порядок, чтобы не удивляться.
Установить NVIDIA Broadcast очень просто — просто войдите в систему. на ваш сайт, скачайте программу оттуда и следуйте шагам, которые укажет мастер, чтобы установить ее на свой ПК. После завершения процесса откройте приложение
Как видите, его интерфейс очень прост. С одной стороны, в верхней части показаны вкладки микрофона, динамика (что также относится к наушникам, если вы их используете) и вкладки видео. Как вы уже поняли, щелкнув любой из них, вы попадете в раздел конфигурации эффектов, связанных с этим носителем.
С другой стороны, с правой стороны сначала показан селектор источника, то есть источник сигнала (аудио или видео), к которому будут применяться эффекты того раздела, а под ним сам селектор источника эффектов. Таким образом, на изображении выше вы можете видеть, что мы находимся в разделе настройки микрофона, что выбранный источник — Razer Seiren V2 X и что на данный момент мы не применяли никаких эффектов.
Итак, давайте начнем с рассмотрения функций, связанных со звуком, которых две, одинаковых как для микрофона, так и для наушников-динамиков, удаление фонового шума и удаление эха. Чтобы использовать его, убедитесь, что вы выбрали правильный источник, нажмите «Добавить эффект», выберите «Удаление шума», переместите ползунок, показанный справа, чтобы активировать его, и, если хотите, отрегулируйте интенсивность эффекта.
На следующем аудио, в котором вентилятор стоит чуть меньше метра от микрофона, вы можете увидеть разницу между звуковым сигналом без эффекта очистки и с его включением с максимальной интенсивностью. Конечно, оптимальная настройка будет зависеть от конкретных обстоятельств, но, как видите, шум полностью устранен.
Камера
Предложение эффектов NVIDIA Broadcast для видеосигнала очень обширно. Чтобы использовать их, как мы видели в случае со звуком, вам нужно будет выбрать источник видео (в данном случае камеру Razer Kiyo Pro), выбрать тот, который вы хотите использовать (вы можете использовать максимум два одновременно). и, в некоторых случаях, внесите необходимые корректировки. Чтобы проверить результат их применения, вы можете сравнить эталонное изображение без эффектов, чуть ниже этого абзаца, с теми, которые иллюстрируют каждый из следующих разделов:
размытие фона
С помощью этого эффекта, как следует из его названия, NVIDIA Broadcast отделит ваше лицо от остальной части изображения, применяя к фону изображения эффект размытия, интенсивность которого вы можете настроить по своему вкусу.
замена фона
Это, вероятно, один из самых востребованных эффектов, и, как вы, возможно, уже догадались, он заключается в том, что мы можем настроить программное обеспечение для определения фона изображения, удалить его и вместо этого отобразить изображение по нашему выбору.
удаление фона
Хотите ли вы полностью нейтральный фон, потому что вам нравится минимализм, или если вы собираетесь использовать его в качестве цветности (скоро мы расскажем вам, как это сделать), вам следует выбрать этот фильтр, который отделит ваше лицо и покажет это на черном фоне..
автоматическое кадрирование
Как вы увидите, когда вы выберете этот эффект, вы увидите, что края изображения обрезаются. Потому что? Потому что NVIDIA Broadcast будет следовать за движениями вашего лица (если они ограничены в пространстве), чтобы всегда держать вас в центре изображения.
Удаление шума из видео (бета)
Для использования в условиях низкой освещенности, и хотя камеры, такие как Razer Kiyo Pro, имеют датчики, которые существенно уменьшают генерацию артефактов, этот эффект позволит вам устранить те раздражающие элементы, которые должны отображаться.
Зрительный контакт (бета)
Лично это моя любимая функция, особенно когда вы собираетесь провести видеоконференцию, во время которой вы хотите наблюдать за экраном так, чтобы ваш собеседник или собеседники этого не осознавали. На изображении ниже я смотрел на экран, а не на камеру, но, как вы можете видеть, программа смогла отлично это замаскировать.
виньетка
Благодаря этому эффекту NVIDIA Broadcast создаст тень вокруг вашего лица. Его положение является мобильным, так как он будет адаптироваться к вашим движениям, как вы можете видеть на изображении.
Как я уже упоминал ранее, NVIDIA Broadcast позволяет одновременно использовать два эффекта для каждого раздела, так что вы можете комбинировать их по желанию, чтобы получить более сложные и интересные эффекты.
Как использовать трансляцию NVIDIA
Как я указал в начале, мы должны следовать определенной последовательности при выполнении настроек, которые мы хотим применить к аудио- и видеосигналу. Во всех этих пунктах производить регулировку не обязательно, но необходимо делать это в том порядке, в котором это указано в этом разделе:
- Настройки источника сигнала: если вы хотите изменить какой-либо аспект захвата аудио или видео, сделайте это до того, как начнете применять эффекты с помощью программного обеспечения NVIDIA, так как трансляция будет работать с изображением, уже обработанным приложением микрофона и камеры. этот чехол от Razer Synapse.
- Настройки NVIDIA Broadcast: поскольку входной сигнал уже настроен в соответствии с нашими предпочтениями, пришло время применить нужные эффекты с помощью программного обеспечения NVIDIA, как мы объяснили в этой статье.
- Настройки целевого программного обеспечения. Некоторые приложения и службы позволяют применять эффекты к изображению и звуку. Конечно, имейте в виду, что они не всегда совместимы с NVIDIA Broadcast, поэтому лучше всего провести тест, чтобы убедиться, что их можно комбинировать.
Так что если, например, вы хотите провести видеоконференцию через Zoom с использованием эффектов NVIDIA Broadcast, то последовательность настроек изображения и звука такая:
Камера -> Razer Synapse -> Трансляция NVIDIA -> Масштаб
Из этого вы уже поняли, что фундаментальным аспектом является настройка NVIDIA Broadcast в качестве источника звука и видео в тех приложениях, в которых вы хотите использовать сигнал, обработанный программным обеспечением NVIDIA, что вы можете сделать довольно легко на просторах большинство случаев. Для этого вам нужно будет получить доступ к настройкам, разделам аудио и видео и выбрать «.Microphone (NVIDIA Broadcast)» и «Camera (NVIDIA Broadcast)» соответственно:
Как видите, использовать NVIDIA Broadcast очень просто, и в то же время он предлагает вам огромный набор возможностей, многие из которых уже приходили вам в голову. Таким образом, если у вас есть видеокарта GeForce RTX 20/30/40, я рекомендую вам попробовать ее, потому что вы наверняка очень быстро начнете ею пользоваться.
