Upscale видео с использованием AI (обсуждение, предложения, обмен опытом)

Современный зритель избалован визуальным контентом в высоком разрешении. Да и верхний предел качества картинки не установлен. Не беда, если видеоролик не отвечает стандартам, улучшить его качество помогут нейросети. Помогут ли?..Обработка видео с использованием ПО на базе искусственного интеллекта (AI)

Щебечем здесь на тему увеличения разрешения (обработки) видео с использованием программного обеспечения на базе искусственного интеллекта (AI)

Современный зритель избалован визуальным контентом в высоком разрешении. Да и верхний предел качества картинки не установлен. Не беда, если видеоролик не отвечает стандартам, улучшить его качество помогут нейросети. Помогут ли?..

Jeza писал(а):

как изменить версию протеуса в топаз аи

В настройках программы - "enable previous model" - будут отображаться и старые и новые версии моделей.

https://docs.topazlabs.com/video-ai/reference-guide/preferences

релиз
Крайне медленно и без какого-либо эффекта вау от апскейла, но всё-таки завершилась вторая версия (чистый кадр без логотипа) обработки советского сериала

Тени исчезают в полдень (1971) DVDRip [H.264/1080p] (серии 1-7 из 7) [Handmade Upscale AI] пять примеров-сравнений исходник vs релиз https://imgsli.com/MzAwNjg1/0/1

получится ли качество лучше, если из 720р апскейлить например до 2к или 4к, а потом ужимать до целевых 1080р?

Zimbura27 писал(а):

получится ли качество лучше, если из 720р апскейлить например до 2к или 4к, а потом ужимать до целевых 1080р?

Оно по определению не может улучшится. Даже если просто апскейлить до 2к или 4к. Так можно привести контент в более удобоваримый (в своём представлении) вид для просмотра на экране с высоким разрешением. Правильный даунскейлинг тоже требует алгоритма и без потерь не происходит. По-этому если есть необходимость создать 1080p контент, надо до 1080p и апскейлить.

Zimbura27 писал(а):

если из 720р апскейлить например до 2к или 4к, а потом ужимать до целевых 1080р?

нет
чем выше множитель увеличения размера кадра, тем больше искажений оригинала
чем больше проходов программой для апскейла, тем больше искажений оригинала

апскейл в топазе вообще не дает увеличения разрешения изображения (увеличение количества ранее невидимых мелких деталей), максимум что можно из программы выжать* - найти баланс между шумодавом и накачкой резкости, без появления артефактов AI - всё настраивается индивидуально для каждого видео

(чисто из практического опыта работы с Топазом)
-------------

смотрите -
я взял свою же пару скриншотов-сравнений из раздачи крестого отца и увеличил.

Слева - студийный профессиональный 4K ремастер, справа - мой кустарный релиз после топаза.

Обратите внимание на оооочень заметную разницу - после топаза пиксели прекрасно различимы, грубые заметные ступенчатые границы, а на студийном ремастере всё поле картинки заполированное, без градиентов.

Zimbura27 писал(а):

получится ли качество лучше, если из 720р апскейлить например до 2к или 4к, а потом ужимать до целевых 1080р?

Нет не получится. Я пробовал 720-ку до 1080 через топаз, а также 1080-ку в 1080, в итоге 2 вариант более лучшего качества.

пример возможного варианта борьбы с сильно зернистыми исходниками средствами Topaz Video AI:

за основу взят блю-рей диск Траффик / Traffic (2000) [CRITERION Collection]

избавиться от "помех" помогла настройка Focus Fix режим Normal (изображение-источник уменьшается в 2 раза, обрабатывается выбранной моделью, затем возвращается в исходное разрешение). для борьбы с чрезмерной контурностью после такой обработки настроены повышенные значения дегало и усилены отрицательные значения баланса антиалиас/деблюр (см. скриншот)

релиз "в работе"

Календарь спасибо Вам за то что добавили в свою подпись ссылку на данную тему, именно так я сюда и попал. также выражаю благодарность всем участникам данного форума.
на этой неделе много тестирую в топазе модели и настройки и прихожу к выводу что нет универсального рецепта.
сравнивал протеус 2 и 4, авто и ручное, rhea авто и ручное.
в моём случае (topaz 5.3.3 апскейл 2х 560р - 1080р) протеус2 дал лучше качество чем протеус4, ручные настройки лучше автоматических и на удивление rhea manual оказалась лучше proteus2, хотя обычно я склоняюсь к работе на протеус - очень уж рея тяжёлая (и теряет детали, мылит текстуру кожи). а протеус2 кстати примерно в 2 раза медленнее протеус4.
просто решил поделиться наблюдениями

В обработке Топазом (ирис-2+протеус-4) Мечтатели / The Dreamers (2003) [Unrated] [KOR Transfer]

после демукса и цветокоррекции (мне показался блюрей излишне розовым в некоторых сценах) выходит так:

два скрина-сравнения https://imgsli.com/MzAyMzk4/0/1
результат (начало фильма)

-------
вопрос: на ваш взгляд - не перезеленил ли я, понизив температуру цвета (LUT 5500К -> 4200К) и вручную покрутив* tint в минус?
картинка смотрится или раздражает холодом*?

Календарь писал(а):

вопрос: на ваш взгляд - не перезеленил ли я?

результат хороший, в топазе только ирис + протеус?
действительно кажется что оригинал краснит, а результат зеленит

Zimbura27 писал(а):

, в топазе только ирис + протеус?

да, оба в авторежиме плюс ручная подстройка, в основном в плюс резкость и шумодав. Различными стабилизаторами ранее пробовал пользоваться - отказался - при любых настройках режется кадр или появляется смазанность кадров между сценами (м.б. попросту у меня не получилось понять их работу)

"Красный-зеленый" - что выгоднее из оттенков?

Календарь писал(а):

"Красный-зеленый" - что выгоднее из оттенков?

может быть есть возможность найти баланс. или вообще так и задумано режисёром/оператором чтобы зеленоватая гамма была :задумался:

я последнее время реже стал использовать ирис, потому что у меня он сильно мылил. у Вас же на скрине-сравнении видно что текстура кожи сохранена и улучшена. как такого добиться? recover detail (100?) и improve detail повыше накручивать?

Recover det. (сохранение исх.) всегда (практически всегда) ставлю от 95 до 90, редко ~70, если уж совсем исходник с различными сильными артефактами. Тога несмотря на шумодав удается сохранить кожу.
По параметрам импруф детали / шарп - баланс : чем выше один параметр, тем ниже второй, иначе артефакты AI обеспечены
Чем хуже исходник или зернистый, тем шарп и импруф стараюсь делать ниже (по той же причине)

Zimbura27 писал(а):

может быть есть возможность найти баланс

да, удалось предварительно настроить ребаланс цвета, убрать избыток зелени до норм. оттенка кожи (КОДАК фильтр)
добавил в топазе IWLTBAP K64.cube из пака IWLTBAP Kodachrome - Free LUTs (Special 10K Facebook Fans)

но теперь изображение менее прозрачное, потерялись детали в тенях

возникло желание не страдать манией цветокорректора, а обработать студийный корейский трансфер "азъ есмь", тем более что я и пришел* практически к тем же самым оттенкам))

Уважаемый, автор! Как сделать такую сочную картинку?

Просмотр доступен только для зарегистрированных пользователей

какой фильтр использовать?