Технология Google способна повышать разрешение изображений до 16 раз без потери качества Статьи редакции
В её основе лежат диффузионные модели.
В блоге Google AI, посвящённом исследованиям и разработкам в области искусственного интеллекта, обнаружили демонстрацию технологии масштабирования изображений на базе диффузионных моделей.
Специалисты внутренней команды Brain Team представили два связанных алгоритма, которые генерируют фотографии высокой чёткости без потери качества.
Первый из них называется SR3 (апскейлинг посредством повторного уточнения). На вход подаётся картинка с низким разрешением, и нейросеть пытается увеличить её, добавляя шум.
Модель обучается методам искажения изображения, а затем поворачивает весь процесс вспять, постепенно удаляя шум для достижения заявленного результата.
Инженеры обнаружили, что SR3 превосходит существующие генеративные алгоритмы, такие как PULSE и FSRGAN, особенно при работе с портретами и фотографиями природы.
В компании не остановились на достигнутом и разработали ещё одну диффузионную модель под названием CDM. На этот раз нейросеть обучили миллионам изображений высокого разрешения из базы ImageNet.
Алгоритм использует каскадный подход и увеличивает фотографии в два этапа: с разрешения 32×32 -> 64×64 -> 256×256 (в 8 раз), либо с 64×64 -> 256×256 -> 1024×1024 (в 16 раз).
Google опубликовала примеры работы алгоритмов. На некоторых изображениях заметны графические артефакты, но в целом результат действительно удивляет. О коммерческом распространении технологии данных пока нет.
https://twitter.com/Mr_Encyclopedia/status/1432784578398273538
Так на первой картинке Обама
Во-во, нейронка не может взять информацию и выдумывает лица.
Кажется я знаю, на чем эту нейронку обучали
А куда белый воротник делся?
Поясняет дальше автор этого твита
Выглядит как фотошляпа
1) Куда рубашка делась?
2) Где тень с правой стороны подбородка?
Как раз хотел написать, что без демонстрации оригиналов (фото, которые были уменьшены и затем восстановлены нейросеткой) это всё не имеет смысла.
Что за расизм со стороны нейронки????? ( ͡° ͜ʖ ͡°)
И это повод остановить любое исследование таких алгоритмов?
Так используется другой алгоритм
Хлорка
Комментарий недоступен
нейросеть-расист
Ба... трудинов?
Хуета какая-то. Куда делась белая рубашка на второй фотке?
Был бы ты человек...
так у него же есть белые предки, значит все легитимно
Комментарий удален модератором
Зашёл ради этой картинки
Вот вы смеетесь, а на форуме небезызвестного Topaz Gigapixel был человек, который представлялся forensics expert, и он всерьёз планировал применять этот софт для криминальной экспертизы. Учитывая, что нейросеть не создает информацию из ниоткуда, а просто "фантазирует" о том, каким могло бы быть большое изображение, могут возникнуть весьма интересные ситуации. Представляете, найдут лоурез фотку с места преступления, а нейросеть при увеличении случайно подставит туда лицо, похожее на ваше, потому что в обучающем датасете был кто-то похожий на вас, или даже прямо ваше фото. Вот так вот "заэнхенсят" - и всё, вы - преступник.
Технология Ochoba способна понижать качество изображений до 16 раз без потери разрешения.
ochoba MbITuLLL,u
Без потери объёма
Очоба способна унижать
Ну что же.
И ведь работает
Мне бы вот на этом фото повысить разрешение, хотелось бы распечатать А2 и повесить в туалете
Лови
Лови
Этот должен даже лучше быть
Комментарий недоступен
Комментарий недоступен
Пора юбисофт нормальный ремастер третьих героев выкатить.
Вот только в ремастере они не просто разрешение подтянули, а все модельки отрисовали заново обновив дизайн
Ну не знаю, что там можно улучшить, когда есть Hota
Получается мы почти дожили до реализации всяких сцен из 24, где аналитики зумят и картинка остается четкой.
Нет, это никогда не будет возможным, потому что, из 4 пикселей, состоящих и 256*3*4 единиц данных невозможно определить муху сидящую на слоне. Нейронка максимум может эту муху нарисовать сама, как и слона, но там может оказаться не муха, а комар. Думаю понятно объяснил смысл и где-то тут в комментах кидали примерно то, что я имею ввиду в виде изображения.
Пока что кроме как в порнухе и восстановлении старых фильмов до нормального качества, другого практического применения этой технологии не могу представить.
Ну нет, информация в пикселизированном изображении потеряна необратимо, отсутствующие детали выбираются и дорисовываются из наиболее подходящих "воспоминаний" нейросети. Новые проблемы для юристов: можно ли принимать фото как доказательство, если, например, номер автомобиля мог быть попросту нарисован алгоритмом superresolution в камере? Чем-то напоминает историю со слишком агрессивным сжатием изображений JBIG в копирах Xerox, когда в сканах документов подменялись случайные цифры.
Перепутал. Это был мем про CSI.
Уверен, что это было доступно давно спецслужбам. Это как с мобильными телефонами и сканером отпечатков пальца.
А теперь картинку высокого разрешения сжимаете до низкого и сравниваете два портрета.
Поздравляю, вы почти изобрели тренировку нейросети.
Почему в таких демонстрациях никто не публикует оригиналы фоток до понижения разрешения?
Тогда будет не так эффектно)
Ну вот, пожалуйста:
https://iterative-refinement.github.io/
Наконец-то старые классические ролики, о фулках которых часто спрашивает ваш друг, обретут новую жизнь!
Збс. Мы всё ближе и ближе к этому.
Обогнал
Комментарий недоступен
ахахах ждал подобной нарезки )
они все знали
Хентай:
Так вроде уже делали расцензуривающую нейросеть для хентай артов
Вот ради интереса взял исходную пикчу в 64х64 пикселя и Топазом обработал ее в 1024х1024. Результат с гугловским, конечно, не сравнится по качеству.
Комментарий недоступен
Топаз вообще для реала бесполезен полностью, очень удивляюсь, что это говно популярно для реала
Можно поинтересоваться, какую версию топаза и модель использовали?
Комментарий недоступен
Подумал что это до - после
Этим алгоритмом был Дэвид Блейн. Раскукожил, так сказатб.
Не очень понимаю смысла слов "без потери качества". Качества в исходной картинке особо и нет. А дополнительные детали робот фактически "выдумывает", разве нет?
Вот если бы они сжали фото до крошечного разрешения, а потом робот его вернул в исходное качество с близким к 100% совпадением к исходнику...
Это не возможно ни при каком уровне технологий.
Осталось протестить как это работает на действительно хуевых изображениях с низким разрешением, аля фотки с сименса.
Сжимать фотографию в высоком разрешении, а потом разжимать ее обратно нейросетью — весело, конечно, но в целом хуйня очередная.
Комментарий недоступен
Можно обойтись и без петабайт. Достаточно лишь указать номер цифры в числе pi с которой начинается нужная последовательность байт.
Например нейросеть, которая используется в ассассинс крид способна гигабайты вариантов анимаций персонажа «сжать» до нейросети около 20мб ОЗУ. Так что смех-смехом, но оно работает на практике и уже давно.
Вам кажется
Комментарий недоступен
есть годный аналог Topaz AI Gigapixel
Выглядит как-то слишком хорошо. Как будто бы они демонстрируют работу на тех же образцах, на которых и тренировали алгоритм.
Хм….
группа "путин каждый день" существовала ради этой технологии
Что получится, если скормить ей пиксельарт?
Улучшит. Вот это я закинул в Гигапиксель.
Интересно, насколько улучшенное изображение соответствует оригиналу, исходному объекту? 🤔
Комментарий недоступен
бля, теперь мой пароль от банка смогут рассмотреть
Бабкин клитор?
А месье знает толк...
Бля а ведь они это 100% внедрят в Pixel ( ͡° ͜ʖ ͡°)
Проснулся?
Куча программ на маркете, где все то же самое делают.
Ещё год назад была представлена эта технология
Магия! Колдуны ебучие!
Исходники будто сгенерированы в thispersondoesnotexist, а там разрешение по дефолту 1024 1024
А конвертните, пожалуйста.
Почему ещё нет гифки с Думгаем от этой сетки?:)
Где шакал.джипег?
Вот где проблема. Если взять и зашакалить хорошую фотку а потом её обработать этим софтом, она будет отличаться от первоначальной фотографии.
Показали бы еще оригинал фото для сравнения.
Нужно сравнение реальных полноразмерных фото и достроенных искусственно.
Есть оригинальные фото?
Т.е. сначала фотографию сжали, потом восстановили до исходного размера.
Короче нужны 3 фото для сравнения, а пока ниочем. Очередной гугловский прорыв.
В комментариях есть примеры референсов.
идеально, я считаю
вообще когда увидел эти две пикчи рядом в голове пронислось:
Snake, we have a new objective for you. The mission is...
А ГДЕ КАК Я хочу нахтигальку улучшить.
отработать от глистов
Цензура в хентае - "Вызов принят 😎"
Где то можно проверить его работу?
Remini уже как год на рынке андроидофонов
Computer, enhance!
В открытом доступе этой штуки нет? Что бы самому попробовать или чего нибудь подобного
И воспользоваться ей никак нельзя ?
Remeni
Неужели шакальные видосы уйдет с просторов инета ?
Значит sci не врали
"In image super-resolution, a machine learning model is trained to turn a low-res photo into a detailed high-res photo, and potential applications of this range from restoring old family photos to improving medical imaging" - с "medical imaging" это уже стремно, ведь этот алгоритм дорисовывать чего не знает... и дорисовка лишней точки в "medical imaging" может иметь интересные (нет) последствия
Ну оно же не от фонаря будет их дорисовывать, а так, как его обучат. А если обучат адекватно, то пользы от него будет гораздо больше.
опять разжимаешь, ебучий ИИ?
как фанат всяких нейронок, рад появлению ещё одной
С очками как всегда проблемес
Комментарий недоступен
О, гугл изобрёл Gigapixel.
Осталось сделать это для видео, и убрать наконец цензуру из японского порно 🤗
это в 16 раз лучше dlss
Комментарий недоступен
Ну прям вообще качество не пострадало.
Видео не запускай, скриншот публикуй.
интересно, а есть ли такой подобный алгоритм в открытом доступе? есть пару фоток, с которых хотел бы сделать себе плакат на стену, но они низкого разрешения, точно не для печати на А1
наконец-то старые порнушные картинки станут в 4к
Больше никаких шакалов в постах! Революция!
шах и мат, ебучие шакалы
Класс. Я пока waifu2x использую.
А где-то этим можно воспользоваться обычному юзеру?
Когда Гугл объявили и завершении бесплатного безлимита в Google Photo, я подумал, что было бы круто иметь возможность алгоритмами вернуть зашакаленной фотографии ее оригинальный вид (за скромную плату, естественно). И вот - пожалуйста: и на жестких дисках сэкономили и фото можно будет превращать в "оригиналы" (надеюсь на это, во всяком случае).
Так покажите вариант когда мы взяли хорошее качественное фото, сделали из него скажем 64х64 (даже не 32х32), потом заюзали этот апскейл и в результате сравнили исходное фото с тем что получилось в результате апскейла.
Хоть какой-то апскейл это тоже коненчо хорошо, вполне себе может пригодится в определенных случаях, но из-за того как подан этот материал, многие люди могут не правильно понять суть всего этого.
Надо такое в играх сделать, через облака, можно тогда оверпрайс новые видеокарты не покупать...
Это было предсказано в сотнях фильмах 90-х с бесконечным приближением фото номеров машины/секретного кода запуска ракет и тд)
Ты не можешь потерять качество, если его нет
Без думгая несчитово.
А можно ли сие чудо бесплатно потестить?
хмм. нейра Waifu 2x Caffe чем им не угодила?
Ребят, а где само приложение то найти найти?
Реквестирую иконки юнитов из первого Старкрафта в размере 1024х1024.