Нейросеть научили редактировать фото по текстовому описанию

In Технологии On
Фото: Sebastian Gollnow / Getty Images

Разработчики из Google научили нейросеть Imagic редактировать фото по текстовому описанию. Результаты работы опубликованы на репозитории препринтов arXiv.

Созданный алгоритм не требует никаких самостоятельных редакторских манипуляций и работает только по текстовому описанию правок. Например, исследователи использовали изображение сидящей собаки. Нейросеть попросили исправить фотографию так, чтобы животное стояло, при этом не затрагивая остальных элементов. Компьютер применяет для этого дифузионный метод, постепенно улучшая кадр на протяжении десятков стадий.

Основное нововведение заключается в работе алгоритма с «прекурсорами». В этом случае текст попадает на генеративную нейросеть не сразу. Сначала он подается на кодировщик, который превращает его в сжатое векторное представление (эмбеддинг), кодирующее идею так, что похожие по смыслу предложения содержат аналогичные эмбеддинги. Нейросеть изменяет не сам кадр, а работает конкретно с текстовыми эмбеддингами.

Ранее сотрудники Университета Калифорнии в Беркли (США) представили четвероногого робота-футбольного вратаря. Устройство способна самостоятельно анализировать траекторию полета и отбивать мяч при его направлении в сторону ворот.

Источник: lenta.ru

You may also read!

Пенсии, надбавки и доплаты. Какие выплаты будут получать пенсионеры в 2024 году

Нижняя палата парламента России на заседании в прошлый вторник, 14 ноября, приняла в третьем, окончательном, чтении проект закона, который

Read More...

В Госдуме объяснили рост цен на жилье в России

Рост цен на недвижимость в России связан со значительно подорожавшим долларом, из-за чего компании стали платить намного больше за строительные материалы: цемент, кирпич, сталь

Read More...

В России предложили изменить систему выплат маткапитала

В России необходимо изменить систему выплат материнского капитала и установить прогрессивную шкалу. Об этом заявил руководитель Института исследований и экспертизы ВЭБа Андрей Клепач,

Read More...

Leave a reply:

Your email address will not be published.

Mobile Sliding Menu