Нейромережу навчили створювати відеоролики за текстовим описом

Корпорація Meta (у минулому Facebook) представила нову нейромережу Make-A-Video. Штучний інтелект вміє генерувати відео з текстового опису.

Деталі

Розробники з команди Марка Цукерберга Meta AI просунулися у дослідженні штучного інтелекту та використали свої напрацювання для створення нового сервісу. Корпорація створила нейромережу, використовуючи загальнодоступні набори даних. Йдеться про мільйони відеороликів загальною тривалістю сотні тисяч годин, які можна знайти у Мережі.

• Штучний інтелект навчився відрізняти справжні картини художників від фальшивих

У компанії розповіли:

За допомогою всього кількох слів або рядків тексту Make-A-Video може втілити в життя уяву та створити унікальні відеоролики, повні яскравих кольорів, персонажів та пейзажів. Система також може створювати відео із зображень або брати наявні відео та створювати нові, схожі на них

Щоб нейромережа згенерувала ролик, користувачеві достатньо описати сцену кількома реченнями. Відео поки що виходять нереалістичними, з розмитими краями та "рваною" анімацією, проте це значний прорив у світі сучасних ШІ-технологій.

Зараз модель створює відео з 16 кадрів з роздільною здатністю 64 на 64 пікселі, які потім збільшуються у розмірі за допомогою окремого алгоритму до 768 на 768 пікселів.

Компанія Nvidia створила нейромережу GauGAN2, яка вміє створювати зображення за текстовим описом. Алгоритм може створити зображення навіть із одного слова