Новая нейросеть Google способна «воссоздавать» фотографии по 64 пикселям

Команда исследовательского проекта Google Brain создала нейросеть, которая способна синтезировать фотографии более высокого разрешения на базе исходника в 64 пикселя.

Система искусственного интеллекта пытается угадать, каким могло бы быть исходное изображение, если бы его уменьшили до 64 пикселей. То есть она синтезирует фотографию, которая могла бы быть исходным изображением. Улучшить первичный набор пикселей она не способна.

Этот процесс организован в два этапа. Сначала используется кондиционная нейросеть (condition network), которая сравнивает изображение размером 8х8 пикселей с похожими изображениями в более высоком разрешении, которые были уменьшены. При этом сверяются общие паттерны и цвета.

На второй стадии задействуется нейросеть приор (prior network), которая использует детали изображений высокого разрешения, чтобы заполнить изображения низкого разрешения.

Затем изображения, сгенерированные обеими нейросетями, объединяются для создания наиболее вероятного варианта исходного изображения.

В Google Brain утверждают, что таким образом система способна сгенерировать изображение разрешением 32?32, близкое к исходному.

Крайнее изображение слева – картинка, полученная нейросетью; в центре –синтезированное фото; справа –оригинал, уменьшенный до 32х32 пикселей.

Планирует ли Google использовать новую нейросеть в действующих сервисах, в компании не уточнили.