Искусственный интеллект от Google научился улучшать качество фотографий

Во многих фильмах мы видели ситуации, когда герои просматривая интересующие фотографии или видеоматериалы могли приблизить интересующий фрагмент и получить детальное увеличеное изображение без потери качества. В реальности из размытого кадра получить понятную картинку до сих пор было невозможно. Однако разработчики из Google Brain написали алгоритм, который позволит повысить качество фрагментов фотографии даже при низком разрешении.

Разработчики использовали две нейросети, первая уменьшала картинку до разрешения 8х8 пикселей и сравнивала с первой фотографией 8х8. Что позволяло почти гарантированно предсказать что изображено на пикселях будущей фотографии с улучшеним качеством.

Вторая нейросеть на архитектуре PixelCNN анализирует похожие изображения и добавляет детали на имеющееся фотографии. Если искусственный интеллект знает, что в кадре находится лицо, пиксели темно-коричневого цвета в верхней части могут указывать на расположение бровей. На очередном этапе повышения разрешения алгоритм дорисует коричневые пиксели нужной формы. Благодаря совместной работе двух нейросетей всего из 64 пикселей можно получить намного более детализированное изображение:

 

Понятно что нейросети не могут восстановить отсутствующие детали на фотографии и отображают лишь найболее вероятные детали. Зато человеку будет понятнее что конкретно именно изображено на картинке. Разработчики так же сообщили что при сравнении фотографий знаменитостей в 10% случаев измененную версию принимали за настояюую картинку. Данная технология может использоваться к примеру для созданий фотороботов приступников которые оказались на видео или фото с камер видеонаблюдения.

По аналогии с детективными сериалами, технология Google Brain может помочь в выслеживании преступников, которые попали на запись камеры видеонаблюдения. Сами исследователи не акцентировали внимание на реальном использовании своего алгоритма. Они просто любят экспериментировать с нейросетями. На закуску — нарезка тех самых моментов из фильмов: