Исследователи из Microsoft создали нейросеть, которая создает картинки по описанию

Команда ученых из Microsoft Research, Университета Олбани и JD AI Research опубликовала исследование, в котором описана работа нейросети, способной создавать образы на основе текстового описания. Об этом сообщает VentureBeat, пишут AIN.UA

Нейросеть типа Obj-GAN (Object-driven Attentive Generative Adversarial Newtork) способна создать картинку по точному описанию, начиная с ее наброска и заканчивая проработкой деталей.

«Масштабные эксперименты показывают, что ObjGAN способна эффективно генерировать сложные сцены, преобразовывая текст в изображение», — говорится в описании проекта.

Нейросеть моделировали так, чтобы она работала подобно художнику, прорабатывающему сложные сцены: от простого к сложным деталям. Система разделяет текст на отдельные слова и сопоставляет их с объектами, проверяя, во-первых, правильность такого сопоставления, и во-вторых, имеет ли оно смысл в контексте целого описания.

Результаты пока неидеальны: нейросеть может генерировать логически несвязные образы, вроде поезда, заброшенного на травянистом холме для описания «Пассажирский поезд катится по рельсам». Но в целом они впечатляют:

Исследователи из Microsoft создали нейросеть, которая создает картинки по описанию

Ольга Карпенко, AIN

Коды для вставки в блог\форум




Интересные новости
Эффективность памяти зависит от концентрации вниманияЭффективность памяти зависит от концентрации внимания
Илон Маск: первую обитаемую базу на Марсе следует строить в северных районах планетыИлон Маск: первую обитаемую базу на Марсе следует строить в северных районах планеты
«Вояджеры» обнаружили более плотный космос вне Солнечной системы«Вояджеры» обнаружили более плотный космос вне Солнечной системы
Попугаи в Бразилии едят кирпичи, но пока непонятно, зачемПопугаи в Бразилии едят кирпичи, но пока непонятно, зачем
Ученые назвали еще одно заболевание, повышающее летальность от коронавирусаУченые назвали еще одно заболевание, повышающее летальность от коронавируса
Блок рекламы


Похожие новости

Учёные создали робота-осьминога, который плавает как настоящийУчёные создали робота-осьминога, который плавает как настоящий
Исследователи впервые извлекли ДНК насекомых, пойманных в смолуИсследователи впервые извлекли ДНК насекомых, пойманных в смолу
Ученые создали экономичное и безопасное «стекло» из дереваУченые создали экономичное и безопасное «стекло» из дерева
Из двумерных материалов создали память с высокой емкостьюИз двумерных материалов создали память с высокой емкостью
Учёные создали цифровую фотокамеру с разрешением 3200 мегапикселей. Ей будут снимать звёздное небоУчёные создали цифровую фотокамеру с разрешением 3200 мегапикселей. Ей будут снимать звёздное небо
Американские учёные создали наноразмерный светодиод невероятной яркостиАмериканские учёные создали наноразмерный светодиод невероятной яркости
Исследователи превратили лидар в «морской телескоп»Исследователи превратили лидар в «морской телескоп»
ВСУ испытали отечественную дымовую шашку УДШ-У, которая заменит советские аналогиВСУ испытали отечественную дымовую шашку УДШ-У, которая заменит советские аналоги
Ученые создали ударные волны сверхновых на ЗемлеУченые создали ударные волны сверхновых на Земле
Киборги уже рядом: китайские ученые создали искусственный глаз, который видит лучше настоящегоКиборги уже рядом: китайские ученые создали искусственный глаз, который видит лучше настоящего
Последние новости

Подгружаем последние новости