Восстановление нерезких фотографий нейросетью

app.baseten.co — Восстановите старые фотографии с помощью нашего приложения, созданного с помощью Baseten и работающего на модели GFP-GAN
Новости, Технологии | Сизый Лайт 13:51 11.08.2022
3 комментария | 52 за, 0 против |
#1 | 17:35 11.08.2022 | Кому: Всем
Чисто интуитивный вывод - резкость фото это дополнительная информация, ее по сути неоткуда взять, имея лишь размытые контуры.

Можно лишь увеличить резкость контуров размытого, что сетка и делает.

Более того, чисто интуитивно опять же, - нейросетку невозможно обучить делать фото более резкими по той причине, что это даже человек по сути делать не умеет, да и невозможно это. Человек лишь делает резкими размытые контуры, и не более (см. Ретушь). А если обучать ее на парах фото, то это бесполезно, т.к. резкое<>f(размытого). Она, как и человек, - не сможет понять, как это получить. Максимум - придет к псевдоретуши, что мы и видим. Но, возможно, что более качественной, нежели человеческая.
#2 | 18:41 11.08.2022 | Кому: TTimur
> вся информация просто перераспределяется по некоторому закону

Так это ключевое.

Нерезкое фото, есть мнение, подобным свойством не обладает.
В отличие от размытого фильтром, просто перераспределившим инфу так, что "одному значению" исходника выставляемо в соответствие "одно значение" размытости.

Пусть возмут фильтр, который "вычисляет среднее", например.
Размоют им и попробуют восстановить.
Это ж задача сродни попытке восстановления предыдущего порядка следования чисел, имея на входе уже отсортированную последовательность, т.е. обратная функция будет иметь на выходе сразу множество значений, а не одно.
Или сродни попытке вычисления данных по имеющемуся их хэшу.
#3 | 18:43 11.08.2022 | Кому: TTimur
> А вот "увеличить разрешение" чтобы прочитать пикселизованный текст реально невозможно

Если для размытия применялся тот же фильтр, который только "перераспределяет" информацию, то - отчего нет?
Если из пятна выводим ясно видимый дом - с текстом должно быть точно так же.
Войдите или зарегистрируйтесь чтобы писать комментарии.