Исследователи из Microsoft создали нейросеть, которая создает картинки по описанию

Команда ученых из Microsoft Research, Университета Олбани и JD AI Research опубликовала исследование, в котором описана работа нейросети, способной создавать образы на основе текстового описания. Об этом сообщает VentureBeat, пишут AIN.UA

Нейросеть типа Obj-GAN (Object-driven Attentive Generative Adversarial Newtork) способна создать картинку по точному описанию, начиная с ее наброска и заканчивая проработкой деталей.

«Масштабные эксперименты показывают, что ObjGAN способна эффективно генерировать сложные сцены, преобразовывая текст в изображение», — говорится в описании проекта.

Нейросеть моделировали так, чтобы она работала подобно художнику, прорабатывающему сложные сцены: от простого к сложным деталям. Система разделяет текст на отдельные слова и сопоставляет их с объектами, проверяя, во-первых, правильность такого сопоставления, и во-вторых, имеет ли оно смысл в контексте целого описания.

Результаты пока неидеальны: нейросеть может генерировать логически несвязные образы, вроде поезда, заброшенного на травянистом холме для описания «Пассажирский поезд катится по рельсам». Но в целом они впечатляют:

Исследователи из Microsoft создали нейросеть, которая создает картинки по описанию

Ольга Карпенко, AIN

Коды для вставки в блог\форум




Интересные новости
В Александровской больнице впервые имплантировали механическое сердце, - КГГАВ Александровской больнице впервые имплантировали механическое сердце, - КГГА
Физики создали идеальный квантовый чип с помощью искусственных атомовФизики создали идеальный квантовый чип с помощью искусственных атомов
Первую в арабском мире атомную электростанцию запустят в ОАЭПервую в арабском мире атомную электростанцию запустят в ОАЭ
Ультразвуковой браслет глушит окружающие микрофоны, включая имеющиеся в смарт-устройствахУльтразвуковой браслет глушит окружающие микрофоны, включая имеющиеся в смарт-устройствах
На Антарктике установлен новый абсолютный рекорд в 20°CНа Антарктике установлен новый абсолютный рекорд в 20°C
Блок рекламы


Похожие новости

Физики создали идеальный квантовый чип с помощью искусственных атомовФизики создали идеальный квантовый чип с помощью искусственных атомов
Австралийские ученые воссоздали коронавирусАвстралийские ученые воссоздали коронавирус
Пентагон испытал нейросеть воздушным боемПентагон испытал нейросеть воздушным боем
В Украине создали "дрона-сапера" способного обнаружить мины с точностью до сантиметра, - АрмияInformВ Украине создали "дрона-сапера" способного обнаружить мины с точностью до сантиметра, - АрмияInform
NASA обнаружило похожую на Землю планету, которая потенциально может быть пригодной к жизниNASA обнаружило похожую на Землю планету, которая потенциально может быть пригодной к жизни
В Китае создали "электрокошку" с шестью эмоциямиВ Китае создали "электрокошку" с шестью эмоциями
В NASA создали карту залежей водяного льда на МарсеВ NASA создали карту залежей водяного льда на Марсе
Астрономы создали первую полную карту Титана — спутника СатурнаАстрономы создали первую полную карту Титана — спутника Сатурна
Нейросеть сама догадалась, что Земля крутится вокруг СолнцаНейросеть сама догадалась, что Земля крутится вокруг Солнца
Астрономы открыли планету-гиганта, которая "не должна существовать"Астрономы открыли планету-гиганта, которая "не должна существовать"
Последние новости

Подгружаем последние новости