Создать анимацию с персонажами «Флинстоунов» может нейросеть CRAFT, причем воспроизводятся все художественные действия по описаниям в письменном виде. …В разработку заложены идеи американских ученых, которые обучили искусственный интеллект, используя как основу датасет из 25000 более чем 180 роликов, пометка которых проводилась вручную. Светлые умы из Института искусственного интеллекта Аллена и Иллинойсского университета в Урбане-Шампейне представили алгоритм, генерирующий моменты на основе случайных текстовых описаний. Такого рода анимация пока далека от идеала, однако в целом искусственный интеллект справляется с задачей неплохо, — пишет Lenta.ru.

Загрузка...

Ученые успешно обучили искусственный интеллект автоматически анимировать новые эпизоды мультсериала «Флинстоуны» с помощью текстового описания. Разработкой занялись специалисты Института искусственного интеллекта Аллена, Иллинойсского университета в Урбане-Шампейне и Университета Вашингтона, которые создали для своих целей нейросеть под названием CRAFT (Composition, Retrieval and Fusion Network – «Состав, поиск и объединение сети»).

Разработчики из Института искусственного интеллекта Аллена и Иллинойского университета создали систему CRAFT (Composition, Retrieval and Fusion Network), задача которой — генерировать анимированную картинку по текстовому описанию. …Тексты, доступные пониманию нейросети, шаблонные: в них должна быть описана обстановка (например, кухня или гостиная) и перечислены персонажи и их действия (сидит, стоит, идет, читает книгу, говорит). Исследователи из Института искусственного интеллекта Аллена, Иллинойсского университета в Урбане-Шампейне и Университета Вашингтона разработали нейросеть под названием CRAFT (Composition, Retrieval and Fusion Network — «Состав, поиск и объединение сети»). С его помощью им удалось успешно обучить искусственный интеллект автоматически анимировать новые эпизоды мультсериала «Флинстоунов» (его производство прекратилось в 1966 году) при помощи текстового описания.

«Для эксперимента использовали мультсериал «Флинтстоуны», более 25 тысяч трехсекундных сцен из которого разметили вручную для обучения нейросети», — сказано в публикации. …Нейросеть допускает незначительные ошибки при отображении прописанных действий, но прогресс в сфере регенерации видеоконтекта из тестового описания есть. Специалисты из Института искусственного интеллекта Аллена и Иллинойсского университета в Урбане-Шампейне представили алгоритм, способный создавать анимацию на основе текста. Порой такого рода экранизация оказывается далека от идеала, однако в целом искусственный интеллект справляется со своей задачей неплохо.

Ученые из США представили основанный на нейронных сетях алгоритм, который может генерировать анимацию на основе текстовых описаний. …Однако ученые из Института ИИ Аллена и Иллинойсского университета пошли гораздо дальше — все-таки генерация анимаций является гораздо более комплексной задачей, чем генерация статичных изображений. Американские разработчики сумели обучить искусственный интеллект создавать короткие анимированные ролики с персонажами мультсериала «Флинтстоуны» по текстовому описанию действий персонажей и происходящего в сцене. …Искусственный интеллект состоит фактически из трех разных нейросетей, позволяющих выделять в тексте композицию сцены, объекты и фон.

Нейросеть CRAFT научилась создавать анимированные рисунки с персонажами «Флинстоунов». …Приложение самостоятельно «передвигает» персонажей, опираясь на слова, которые описывают нужные действия. Специалистам из США удалось научить нейронную сеть создавать небольшие сценки из мультипликационного сериала «Флинтстоуны» по текстовым описаниям. По словам ученых, уникальным алгоритмом генерируются отдельные моменты из мультсериала на базе случайных записей, в которых описываются те или иные сценки.

В отличие от уже создана первая нейронная сеть на мемристорах — цель — создать программу fx. Чтобы она по заданной картинке узнавала букву, чем больше периодов обучения прошла программа. Тем точнее она будет распознавать x; для которых неизвестен правильный ответ y! Нейросеть построит настоящую 3d-карту средиземья, геоинформационных систем гис и 3d-анимации.
Существуют также алгоритмы, позволяющие визуализировать текстовые описания. Оно включает трансформативное обучение, лично осмысленную интерпретацию опыта и действий: проявление творческого подхода!

Загрузка...