Часто возникают ситуации, когда дорогая, как память фотография теряет часть изображения от времени или из-за каких либо механических повреждений. Чтобы воссоздать ее и придать испорченной фотографии новый вид — затрачивается много времени. Это сложный процесс, требующий кропотливой ручной работы восстановления каждого фрагмента попиксельно.
Технологии, восстанавливающие фотографию
Специалисты многих компаний пытаются решить эту проблему, создавая автоматизированные системы. Недавно группа инженеров NVIDIA совершила прорыв в этом вопросе, представив нейросеть, которая способна отретушировать «лишнее», например водяные знаки или дорисовать исчезнувшую деталь, фрагмент. Эта революционная технология от NVIDIA полностью уникальна, подобных аналогов в мире нет.
Разработал и представил алгоритм для обсуждения инженер Гуйлинь Лю. Конкурирующая компания Adobe разрабатывает нечто похожее. Однако технология, представленная нейросетью NVIDIA от нее выгодно отличается.
Технология восстановления от Adobe
Так создатели известного Photoshop в своей разработке решили купить нейросеть с установкой и использовать технологию, которая:
- Проводит обработку заданного изображения через соседнюю область контекстного отображения;
- В соответствии с полученной информацией достраивает, прорисовывает полную картинку.
Этот подход имеет достаточно большой минус. Соседний кусок, используемый «как образец» может иметь совершенно другую гамму или содержать несколько цветов. Например, фрагмент с края будет красным, а в центре желтым. А Программа видит только красное поле и делает заливку недостающей части всю в красном цвете.
Технология восстановления от NVIDIA
NVIDIA дает другое решение. Они используют технологию, анализирующую всю картину в целом, а не отдельные фрагменты, нуждающиеся в доработке. Нейросеть ищет взаимосвязь между отдельными объектами, анализируя, что может находиться в пропущенных местах. Проведя анализ, Программа прорисовывает фрагменты так, чтобы получилась единая многоцветная картина.
Если использовать предыдущий пример: красное-желтое, то алгоритм «изучит» всю картину, определит недостающие части, сравнит со схожими фрагментами и «дорисует» пропущенную часть так, чтобы на выходе получилась нечто схожее на оригинал.
Технология еще требует проработки и усовершенствования как и разработка социальной сети. Когда она будет полностью готова, то восстановление фотографии или другого важного цветного материала будет происходить в течение пары минут.
Разработчики подготовили видео, показывающее возможности своего образца. Уже на этом этапе видно насколько хорошо ИИ проводит дорисовку женских глаз.