Классический форум-трекер
canvas not supported
Нас вместе: 4 232 066

Технология Google повышает разрешение изображений до 16 раз без потери качества


Страницы:  1, 2, 3, 4, 5  След. 
 
RSS
Начать новую тему   Ответить на тему    Торрент-трекер NNM-Club -> Компьютеры и комплектующие -> Компьютерные новости
Автор Сообщение
Implode Sch ®
RG Soft

Online
Стаж: 12 лет 8 мес.
Сообщений: 7493
Ratio: 90.62
Поблагодарили: 451240
100%
В июле исследователи Google из команды Brain Team поделились своими достижениями в области масштабирования изображений. Результаты своих исследований они опубликовали в блоге Google AI, посвящённом исследованиям и разработкам в области машинного обучения и искусственного интеллекта.

В статье под названием «Создание высокоточных изображений с использованием диффузионных моделей» (High Fidelity Image Generation Using Diffusion Models) продемонстрирована технология масштабирования изображений на базе диффузионных моделей

Говоря простыми словами, Image Super-Resolution — это технология «умного» увеличения изображений. Она заключается в обучении модели превращать изображение с низким разрешением в изображение с высоким разрешением (технология RAISR была описана в блоге Google AI в 2016 году).

Если быть точным, в свежей публикации описан подход, основанный на комбинации двух алгоритмов — SR3 и CDM. Он позволяет создавать изображения высокого разрешения без заметной потери качества.

SR3 - Super-Resolution via Repeated Refinements - масштабирование через повторное уточнение.

CDM - Cascaded Diffusion Models - каскадные диффузионные модели.

Super-Resolution via Repeated Refinements

SR3 принимает на вход изображение в низком разрешении и пытается построить изображение с более высоким разрешением, добавляя в него гауссовский шум и размытие на каждом повторе. Итоговое изображение по сути содержит чистый шум. Затем идёт обратный процесс - модель постепенно удаляет шум для достижения нужного результата.

Обученная на огромном массиве данных, модель SR3 показывает хорошие результаты в задачах масштабирования в 4-8 раз изображений лиц и изображений объектов живой природы: 64x64 → 256x256 (в 4 раза) и 256x256 → 1024x1024 (в 4 раза). Объединив модели в каскад, можно масштабировать изображения до 16 раз: 64x64 → 1024x1024.

Как оценить качество работы SR3? Результаты работы модели сравнивают с результатами работы других моделей. Участвующих в эксперименте людей просят выбрать изображение, которое, по их мнению, сделано на фотокамеру (так ставится вопрос).

Участники выбирают между изображением, которое создала модель, и оригинальным изображением с камеры.

Результаты масштабирования трёх алгоритмов (Bicubic, Regression, SR3): сверху — изображения с лицом (64x64 → 512x512), снизу — изображения животного (64x64 → 256x256). Оригинальное изображение в правом столбце.

Эффективность модели измеряется с помощью коэффициента путаницы (confusion rate): какой процент времени участники эксперимента выбирают результат работы модели, а не эталонное изображения (а идеальный алгоритм как раз и даёт "50-процентный коэффициент путаницы").

Результаты этого исследования показаны на графике. Сверху: коэффициент путаницы в задаче с изображениями лиц (16x16 → 128x128). Снизу: коэффициент путаницы в гораздо более сложной задаче — с изображениями объектов живой природы (64x64 → 256x256)

Cascaded Diffusion Models

CDM обучена на огромном количестве изображений из базы ImageNet, которые представляют собой достаточно сложный набор данных. Именно по этой причине CDM построена как каскад нескольких моделей.

Каскадный подход представляет собой цепочку нескольких генеративных моделей, каждая из которых создаёт изображение с разным разрешением: одна диффузионная модель генерирует изображение с низким разрешением, которое обрабатывает SR3, постепенно повышая разрешение до максимально доступного. (GIF)
YouTube
О реальном внедрении или коммерческом применении информации пока что нет.

Источник

_________________

WIN11/23H2(22631)Pro
NeNeMe-Club
Стаж: 8 лет
Сообщений: 8
Откуда: NoNaMe-Club
nnm-club.gif
А кто-нибудь знает, есть ли онлайн сервис, где ИИ, к примеру изображение с 4К увеличивает в 10 раз без потери качества или после увеличения обрабатывая улучшая качество?
PS: мне надо для фотопечати на натяжных потолках.
Ignotus
 
Стаж: 11 лет 5 мес.
Сообщений: 2305
Ratio: 4580.027
100%
ussr.gif
Очень полезная технология.
Даже с точки зрения обывателя. Например, есть куча старых снимков низкого, даже практически никакого качества, а тут, с помощью этого можно запросто все исправить!
Молодцы.

_________________
В этом мире нет секретов, даже если все думают, что это только их секрет.
iRX
 
Стаж: 17 лет 2 мес.
Сообщений: 1216
Ratio: 8.141
100%
Откуда: Москва
russia.gif
NeNeMe-Club писал(а): Перейти к сообщению
А кто-нибудь знает, есть ли онлайн сервис, где ИИ, к примеру изображение с 4К увеличивает в 10 раз без потери качества или после увеличения обрабатывая улучшая качество?
PS: мне надо для фотопечати на натяжных потолках.

Я не знаю про онлайн сервисы, но Gigapixel вытягивает с 4К только до 8.33 крат, только что проверил.
Max_Alekseyev
Uploader 100+

Online
Стаж: 13 лет
Сообщений: 17275
Ratio: 31.76
Раздал: 165.3 TB
Поблагодарили: 2671
100%
Откуда: Kharkіv, UA
ukraine.gif
NeNeMe-Club писал(а): Перейти к сообщению
к примеру изображение с 4К увеличивает в 10 раз

Размер файла (tiff, RGB) - 2,48Гб, Photoshop. Используйте его, он корректно всё увеличит
demkos08
Стаж: 12 лет 9 мес.
Сообщений: 115
Ratio: 4.487
Поблагодарили: 101
100%
Откуда: Донецк
ussr.gif
Ignotus писал(а): Перейти к сообщению
Очень полезная технология.
Даже с точки зрения обывателя. Например, есть куча старых снимков низкого, даже практически никакого качества, а тут, с помощью этого можно запросто все исправить!
Молодцы.


Согласен. Очень полезно...

 !  Примечание от pericl:
Отредактировано.
hithold
Стаж: 16 лет 8 мес.
Сообщений: 28
Ratio: 0.534
0.27%
Ignotus писал(а): Перейти к сообщению
Очень полезная технология.
есть куча старых снимков низкого качества, а тутможно запросто все исправить!
Молодцы.

Итоговая фотография будет грубо говоря "выдумкой" нейросети. В примере со старой фотографией, скажем вашего дедушки, получится просто какое-то аморфное лицо собранное из миллиона лиц в базе нейросети.
OnayJenil
Стаж: 9 лет 5 мес.
Сообщений: 66
Ratio: 4.3
29.08%
kazakhstan.gif
NeNeMe-Club писал(а): Перейти к сообщению
А кто-нибудь знает, есть ли онлайн сервис, где ИИ, к примеру изображение с 4К увеличивает в 10 раз без потери качества или после увеличения обрабатывая улучшая качество?
PS: мне надо для фотопечати на натяжных потолках.

Можно все. Нужно ли это кому либо? Ведь нет фотоаппаратов с таким разрешением чтобы на основе этих фотографий тренировать нейронную сеть. И делать миллионы изображен на таком фотоаппарате и уменьшат потом все это прогонять через сеть, это очень затратно.

PS: когда то я критиковал шпионские фильмы которые улучшать пикселеные изображения. Теперь признаю, футурологи были правы. Думаю что пересадит голову на новое тело в будущем будет обыденностью.
AAS_asha
Стаж: 7 лет 5 мес.
Сообщений: 597
Ratio: 0.81
100%
Откуда: Оттуда
ussr.gif
Цитата:
Технология Google повышает разрешение изображений до 16 раз без потери качества

Как же не хватало этого для телефона с камерой 0,3 мегапиксель в моей далекой юности.

_________________
"Это вам не это". ©
grogarius
Стаж: 11 лет 3 мес.
Сообщений: 191
Ratio: 8.895
Раздал: 16.86 TB
100%
witch.png
Физику не обманешь, а это "дорисовывание" чушь собачья.
Max_Alekseyev
Uploader 100+

Online
Стаж: 13 лет
Сообщений: 17275
Ratio: 31.76
Раздал: 165.3 TB
Поблагодарили: 2671
100%
Откуда: Kharkіv, UA
ukraine.gif
OnayJenil писал(а): Перейти к сообщению
Можно все. Нужно ли это кому либо?

При увеличении картинки такого размера, ла еще и в кратный размер и так всё хорошо отработает, кому охота, можно пройтись шарпом или Топазовские плагины есть, только я бы приготовился к нарузке на процессор

На I9-9900K, 4Kx10, Photoshop, Unsharp mask (обрезчение), секунд 8-10, не ужасно
ambystoma
Стаж: 10 лет 3 мес.
Сообщений: 2051
Ratio: 3639.542
100%
Цитата:
КАЧЕСТВО ИЗОБРАЖЕНИЯ
совокупность потребительских свойств изображения, проявляющихся при его восприятии и оценке наблюдателем на основе форм зрительных образов, что предполагает наличие в структуре качества не только объективных (физических), но и субъективных свойств. Соотношение между физическими и субъективными характеристиками изображения выглядит следующим образом. Физические характеристики: Субъективные характеристики: 1. градиентные (на основе свойств пограничной кривой) 2. фокусировка, резкость, отчетливость 3. частотно-контрастные контрастность, различимость градаций (спектральные и амплитудные) яркости, плотность, тоновые оттенки, цвет 4. интенсивность (яркость) 5. стабильность 6. минимальная и максимальная видимая яркость, четкость, детальность мерцание, дрожание 7. пространственные (физические размеры, линейные и нелинейные искажения, мерность пространства) 8. адекватность формы и величины, объемность Показателем К. и. является количественная мера реакций наблюдателя при решении им задачи оценки свойств изображения, а уровень К. и. представляет категориальную меру реакций наблюдателя при решении задачи оценки свойств изображения. Оценка К. и. заключается в проявлении отношения субъекта к объекту через формализованные реакции путем генерализации или дифференциации свойств изображения согласно поставленной задаче восприятия. Смысловые акценты, положенные в основу этих определений, подтверждены экспериментами по оценке К. и. (Г. М. Романов).
DmitryXS
Стаж: 4 года 9 мес.
Сообщений: 151
Ratio: 2.049
0%
А как вообще можно потерять качество при увеличении разрешения? Даже если ничего не делать оно останется прежним))
LookeRok
Стаж: 10 лет 3 мес.
Сообщений: 48
Ratio: 63.341
21.8%
ussr.gif
Типа конец эры ручного восстановления фоток "на памятники"?

А с ч/б что будет?
А не портреты как выглядят?

По морде ягура уже видно, что пока не определит, что это ягуар - ничего внятного ждать не приходится.

А так, конечно, интересный результат.
DmitryXS
Стаж: 4 года 9 мес.
Сообщений: 151
Ratio: 2.049
0%
Вообще очень на фейк похоже, там такие детали по пикселям восстанавливаются, что больше походит на то как "До" и "После" местами поменяли, а учитывая что оригинал фото до уменьшения не показывают, то уверен на 95% что "После" это на самом деле "До".
Показать сообщения:   
Начать новую тему   Ответить на тему    Торрент-трекер NNM-Club -> Компьютеры и комплектующие -> Компьютерные новости Часовой пояс: GMT + 3
Страницы:  1, 2, 3, 4, 5  След.
Страница 1 из 5