Исследователи из Microsoft создали нейросеть, которая создает картинки по описанию

Команда ученых из Microsoft Research, Университета Олбани и JD AI Research опубликовала исследование, в котором описана работа нейросети, способной создавать образы на основе текстового описания. Об этом сообщает VentureBeat, пишут AIN.UA

Нейросеть типа Obj-GAN (Object-driven Attentive Generative Adversarial Newtork) способна создать картинку по точному описанию, начиная с ее наброска и заканчивая проработкой деталей.

«Масштабные эксперименты показывают, что ObjGAN способна эффективно генерировать сложные сцены, преобразовывая текст в изображение», — говорится в описании проекта.

Нейросеть моделировали так, чтобы она работала подобно художнику, прорабатывающему сложные сцены: от простого к сложным деталям. Система разделяет текст на отдельные слова и сопоставляет их с объектами, проверяя, во-первых, правильность такого сопоставления, и во-вторых, имеет ли оно смысл в контексте целого описания.

Результаты пока неидеальны: нейросеть может генерировать логически несвязные образы, вроде поезда, заброшенного на травянистом холме для описания «Пассажирский поезд катится по рельсам». Но в целом они впечатляют:

Исследователи из Microsoft создали нейросеть, которая создает картинки по описанию

Ольга Карпенко, AIN

Коды для вставки в блог\форум




Интересные новости
Ученые предположили, что коронавирус может передаваться через дыханиеУченые предположили, что коронавирус может передаваться через дыхание
У 15% кошек из Ухани обнаружены следы коронавирусаУ 15% кошек из Ухани обнаружены следы коронавируса
Космическую ракету продали с открытого онлайн-аукционаКосмическую ракету продали с открытого онлайн-аукциона
Украина успешно испытала ракетный комплекс "Нептун"Украина успешно испытала ракетный комплекс "Нептун"
В Индии создали бюджетный портативный аппарат ИВЛ, - СМИВ Индии создали бюджетный портативный аппарат ИВЛ, - СМИ
Блок рекламы


Похожие новости

В Индии создали бюджетный портативный аппарат ИВЛ, - СМИВ Индии создали бюджетный портативный аппарат ИВЛ, - СМИ
Инженеры команды Формулы-1 "Мерседес" создали инновационные аппараты ИВЛ менее чем за 100 часовИнженеры команды Формулы-1 "Мерседес" создали инновационные аппараты ИВЛ менее чем за 100 часов
Видео: Microsoft Research снова показала свою VR-трость с тактильной отдачей для слепыхВидео: Microsoft Research снова показала свою VR-трость с тактильной отдачей для слепых
В США создали активный голеностопный экзоскелетВ США создали активный голеностопный экзоскелет
К Солнцу летит комета, которая может устроить световое шоуК Солнцу летит комета, которая может устроить световое шоу
В Стэнфорде сделали литиево-ионную батарею, которая работает даже в огнеВ Стэнфорде сделали литиево-ионную батарею, которая работает даже в огне
Физики создали идеальный квантовый чип с помощью искусственных атомовФизики создали идеальный квантовый чип с помощью искусственных атомов
Австралийские ученые воссоздали коронавирусАвстралийские ученые воссоздали коронавирус
Пентагон испытал нейросеть воздушным боемПентагон испытал нейросеть воздушным боем
В Украине создали "дрона-сапера" способного обнаружить мины с точностью до сантиметра, - АрмияInformВ Украине создали "дрона-сапера" способного обнаружить мины с точностью до сантиметра, - АрмияInform
Последние новости

Подгружаем последние новости