Скалинг
Существует множество различных способов масштабирования в современных постпроизводственных средах. Какие есть инструменты (плагины) для скалирования видео:
...........................
Эффект Detail-preserving upscale.
Прямо в After Effects встроен инструмент под названием «Увеличение с сохранением уровня детализации» (Detail-preserving upscale). Поскольку у большинства людей есть Creative Cloud, он уже должен быть доступен для вас. Кроме того, он уже является частью рабочих процессов многих редакторов и должен быть быстро и легко интегрирован в ваш следующий проект.
Все, что вам нужно сделать, это применить эффект к рассматриваемому клипу и убедиться, что он правильно заполняет кадр. Вам нужно будет отрендерить его, чтобы хорошо рассмотреть, но конечный результат намного лучше, чем встроенный скалер в Adobe Premiere Pro.
Эффект «Увеличение с сохранением уровня детализации» используется для сильного увеличения масштаба изображений с сохранением деталей, а также резкости линий и кривых. Например, можно масштабировать кадры из формата SD в формат HD или из формата HD в формат кадра для цифрового кино.
Этот эффект очень тесно связан с параметром ресамплинга «Сохранить детали» (Preserve Details) в диалоговом окне «Размер изображения» (Image Size) в Photoshop.
Элементы управления эффекта «Увеличение с сохранением уровня детализации» (Detail-preserving upscale):
- Подогнать по ширине композиции (Fit To Comp Width): настраивает процент масштабирования так, чтобы ширина слоя совпадала с шириной композиции.
- Подогнать по высоте композиции (Fit To Comp Height): настраивает процент масштабирования так, чтобы высота слоя совпадала с высотой композиции.
- Масштаб (Scale): минимальное значение — 100%.
- Уменьшить шум (Reduce Noise): используется для уменьшения шумов перед вычислением масштабирования. Увеличивает значение таким образом, чтобы шум не был ошибочно распознан как элемент, который необходимо сохранить.
- Детализация (Detail): при высоких значениях повышается резкость или контраст краев, но при этом могут появиться кольцевые артефакты или ореолы. Низкие значения параметра «Детализация» делают края более плавными и естественными.
- Альфа (Alpha): обрабатывает альфа-канал отлично от цветовых каналов. Обработка альфа-канала может отличаться от обработки цветовых каналов с целью повышения производительности. По умолчанию используется параметр «Бикубическая» (Bicubic).
Эффект «Увеличение с сохранением уровня детализации» (Detail-preserving upscale) работает медленнее других возможностей масштабирования, таких как использование естественного билинейного (bilinear) или бикубического (bicubic) масштабирования слоя в группе свойств «Трансформирование» (Transform).
Применяем эффект к видео в композиции: Effect > Distort > Detail-preserving Upscale.
...........................
Плагин Red Giant Shooter Instant 4K - это скоростное преобразование видео в различные форматы большого разрешения с выдающимися результатами. Плагин использует интеллектуальные алгоритмы генерации новых пикселей, чтобы видео соответствовало размерам целевого разрешения, затем добавляет резкости и сглаживания, сохраняя детали изображения.
Нет поддержки GPU ускорения.
...........................
Плагин Voukoder 4.0 for Premiere Pro.
Voukoder это бесплатный плагин, который построен на ffmpeg библиотеках и использует фильтр Ланцоша (Lanczos). Выбираем в Voukoder 4.0 (и выше) фильтр ZScale. Быстрый просчёт с помощью CPU (нет поддержки GPU ускорения, для скалирования).
...........................
Плагин BGRA GPUResize.
GPUResize даёт доступ к большому количеству алгоритмов и активно использует GPU ускорение. Цель состоит в том, чтобы сохранить как можно больше деталей при увеличении или уменьшении изображений при рассмотрении содержимого масштабируемого изображения/видео.
Доступные методы интерполяции:
- Nearest (pixel-exact): его можно использовать для масштабирования пиксельной графики и анимации в стиле «gif».
- Bilinear (cheap, classic): выполняет билинейное масштабирование изображения.
- Triangle (cubic, smooth, triangle shaped): он обеспечивает немного лучшие, и более гладкие результаты, чем обычный билинейный фильтр.
- Bell (cubic, smooth, bell shaped): гладкий кубический фильтр с Bell-curve.
- B-Spline (smooth spline filter): этот кубический фильтр использует интерполяционные функции B-сплайна вместо классических кубических сплайнов, которые в целом дают довольно гладкие результаты.
- Catmull-Rom (cubic, very sharp): резкий кубический фильтр с помощью сплайн-интерполяции Catmull-Rom.
- Mitchell (cubic, neutral): Сепарабельный кубический фильтр Mitchell-Netravali, подходящий для понижающей дискретизации реальных изображений. Очень точный фильтр без размытия, но без особой резкости.
- Lanzcos3/Lanzcos4/Lanzcos6 (HiQ, sharp): данный фильтр назван в честь венгерского математика и, вероятно, это лучший фильтр с точки зрения сохранения деталей и резкости при пересчете «обычных» изображений.
Lanzcos3 / Lanzcos4 / Lanzcos6 выполняют фильтрацию с размером окна, равным 3, 4 и 6 пикселей соответственно.
- Kaiser (HiQ, smooth): оконный фильтр Kaiser-Bessel; очень хорошие результаты, и более плавные, чем у Ланцоша.
Минус данного плагина - это медленная работа скалирования.
...........................
Плагин ScaleUp v1.0 Win от Vimager.
ScaleUp - это продвинутый инструмент для улучшения видео, он может увеличить видео (скалировать) до 10 раз с минимальной потерей качества изображения.
С помощью технологии искусственного интеллекта ScaleUp tool может не только увеличить масштаб ваших кадров, но и улучшить качество видео. Он может увеличить разрешение изображения, сохраняя при этом детали.
Для увеличения изображения, вместо интерполяции пикселей с использованием традиционных билинейных / бикубических методов, интеллектуальная технология искусственного интеллекта используется для изучения и анализа пикселей большого количества изображений и клипов с использованием нейронной сети для улучшения качества изображения и уменьшения шумов, даже блочных эффектов в сжатом видео.
Увеличьте изображение, прекрасно сохраняя при этом качество изображения. Разумно восстанавливайте потерянные текстуры и детали из изображений с низким разрешением. ScaleUp создает потрясающе четкие изображения всего одним щелчком мыши, простые, как обычный апскейл, но с гораздо более высоким качеством.
Кроме того, плагин ScaleUp ускоряется GPU для Adobe After Effects и Adobe Premiere Pro, а также доступен для Mac и Windows платформ.
...........................
Плагин Autokroma Vizual PixelPerfect.
Как вы, возможно, знаете, увеличение масштаба пиксельной графики (в результате чего получаются блочные изображения, например, для отображения старых изображений и спрайтов) изначально невозможно в Premiere Pro. Пользователям необходимо обойти ограничения Premiere Pro, и этот процесс занимает достаточно много времени.
Чтобы решить эту проблему, был разработан плагин эффектов под названием PixelPerfect, который позволяет вам легко сделать это за несколько кликов!
Особенности плагина:
- Алгоритм Nearest Neighbor (придает квадратный вид, хорошо подходит для пиксельной графики), алгоритм линейной интерполяции (Linear) и алгоритм Nearest со сглаживанием (Antialiasing), управляемым с помощью ползунка размытия краев (Edge Blur).
- Ускорение GPU (Metal на macOS, CUDA и OpenCL в Windows) в After Effects.
- Масштабирование от центра исходного изображения в Premiere Pro и в After Effects масштабирование от точки привязки слоя (не забывайте, что это выражено в исходном разрешении).
- На данный момент можно выделить только весь увеличенный кадр (например, если вы увеличите 1080p кадр на x4, то получите 8K кадр).
...........................
Topaz Video Enhance AI.
Данная программа экстраполирует детали изображения, полагаясь на технологии глубокого обучения. За счет этого обеспечивается высокое качество и реалистичная детализация.
Программа практически не требует никаких настроек и работает по принципу нажатия одной кнопки "увеличить и улучшить". Можно запустить пакетную обработку.
Используется GPU ускорение. Высокие минимальные аппаратные требования включают в себя видеокарту NVIDIA GeForce GTX 1050 с 4 ГБ памяти. Для высокой скорости обработки понадобится видеокарта уровня NVIDIA GeForce GTX 1080 или более производительная. На каждый FullHD кадр, видеокарта уровня NVIDIA GeForce GTX 1080 потратит 4-5 секунд времени.
Поддерживается интегрированная видеокарта (iGPU) процессоров Intel (но скорость работы снизится в 5 раз), а также "софтовый" рендер. Нет поддержки видеокарт построенных на чипсетах AMD.
Нет поддержки Multi-GPU, но можно назначить различные процессы на различные видеокарты, однако одна запущенная программа будет работать только с одной видеокартой.
Максимальное поддерживаемое разрешение - 8K.
Другие ограничения: не работает с чересстрочным видео, необходимо сначала произвести деинтерлейсинг (deinterlace). Позднее обещают встроить эту функцию в программу.
Не работает с аудио дорожкой, необходимо потом делать мультиплексинг.
...........................
Topaz Gigapixel AI - программа для масштабирования изображений, работающая при помощи искусственного интеллекта и машинном обучении. При увеличении картинки, утилита заполняет детали и учитывает множество особенностей, способствующие качественному зуму без артефактов и размытий. С каждым новым сканированием, программа будет выдавать более лучший результат, обучаясь и распознавая проблемные участки в реальном времени.
Увеличивая изображение, утилита делает большой акцент на детали. Увеличивать изображения без потери качества и четкости можно до 60 процентов. Также в работу программы входит преобразование DSLR-формата в ультра-четкие 100 мегапиксельные изображения. Topaz Gigapixel AI учился на тысячах фотографиях, чтобы оценивать качество картинки и зуммировать пиксели без размытости и смазанности изображения. Также при увеличении программа восстанавливает реальные детали картинки для фактической резкости.
Самый простой способ придать резкости - увеличить контрастность краев. Topaz Gigapixel AI поступает несколько иначе: он при увеличении контрастности параллельно восстанавливает реальные детали фотографии. При этом на выходе имеется четкое увеличенное изображение, словно никакие действия с ним не проводились. Утилита умеет определять шум и работает с детализацией изображений.
Возможностями софта пользуются фотографы, моддеры, разработчики видеоигр и т.д. Утилита предоставляет самые современные технологии и в отличие от интерполярного масштабирования делает огромный скачок вперед, позволяя ИИ обучаться и развиваться в процессе работы над проектами. Нейронная сеть каждый раз пытается найти более лучший метод улучшения изображения и на выходе показывать лишь естественные детали. Движок программы использует ресурсы видеокарты (нет поддержки Multi-GPU) для вычислений.
Интерфейс утилиты очень интуитивный и простой, что позволит разобраться в работе приложения не только опытным фотографам и редакторам, но и новичкам.
...........................
Плагин RevisionFX REZup. Повысьте качество («IQ») вашего контента, увеличьте разрешение вашего видео без потери деталей или появления артефактов.
Lancsoz (включенный для справки в REZup) считается лучшим классическим методом масштабирования передискретизации, поскольку он добавляет немного резкости. REZup лучше, чем стандартные фильтры изменения размера, такие как Lanczos или кубический (cubic).
Повышение разрешения (одинаковое измерение на входе и выходе) или увеличение масштаба (также уменьшение масштаба).
Функционал плагина для Adobe Premiere Pro 2023:
- Не ограничивается кратным (целым) масштабированием. Поддержка дробного коэффициента изменения размера (цифровой зум).
- Обрезка источника. Поддерживает исходное окно для изменения размера.
- Модели машинного обучения. Тренировался на 2х, 3х и 4х. Большие коэффициенты масштабирования могут потребовать предварительной обработки (например, шумоподавления).
- Поддержка альфа-канала. Учитывает альфа-значение при улучшении. Работает должным образом на полупрозрачных значениях.
- Адаптивный интерфейс. Пользовательский интерфейс подсказывает, как вы вносите изменения, начиная с безопасного и простого. Поддерживает различные алгоритмы для обработки различных крайних случаев и исходного видеоматериала.
- Способ изменения выходного разрешения видео различается в зависимости от используемого хост приложения.
- Расширенный динамический диапазон. Поддерживает произвольные диапазоны изображений, то есть значения пикселей меньше 0 и больше 1,0 (белый).
- Настривайте под себя. Отдельные регуляторы резкости и контраста, шумоподавления — не черный ящик. Сделайте так, чтобы это выглядело правильно.
- Любое разрешение. Отличный способ масштабировать HD-видео до UHD (4K) и т.д.
- Поддержка GPU ускорения (OpenCL 1.1 и выше).
