Нова технологія на основі штучного інтелекту створює неймовірні 3D-ефекти. Відео

Якщо ви ще не бачили цих приголомшливих 3D-ефектів, то запам'ятайте цей момент, адже скоро вони будуть на кожному кроці. Технологія Neural Radiance Field (NeRF) розвивається такими ж шаленими темпами, як і решта світу штучного інтелекту, з приголомшливими результатами.

• Технології, давайте повільніше: з’явилися перші відео, які ШІ створив з текстових описів

Деталі

Запроваджена дослідниками з Каліфорнійського університету в Берклі, Каліфорнійського університету в Сан-Дієго та Google, технологія штучного інтелекту NeRF вперше з’явилася на публіці у березні 2022 року, коли nVidia представила свою надшвидку демонстрацію "Миттєвого NeRF" на конференції розробників GTC.

Суть технології полягає в тому, що ви ходите по певній місцевості, знімаючи фотографії або відео за допомогою смартфона, а потім завантажуєте результати в службу, де нейронна мережа використовує різноманітні методи штучного інтелекту, щоб отримати послідовність зображень реального світу та використовувати їх для створення 3D-моделі вашого оточення.

Потім ви можете взяти цю модель і робити з нею будь-які речі, зокрема знімати різні прольоти камери або створювати фотореалістичні 3D-середовища для використання у відеоіграх, VR-дослідженнях або в інших цілях. Відео нижче чудово ілюструє те, що можна створювати завдяки такій технології. І це зробила одна людина, а не величезна команда операторів.

Важко уявити, на що буде здатна ця технологія у поєднанні зі штучними інтелектом, який вміє перетворювати текст у відео та ще й з допомогою генеративних тестових ШІ, як ChatGPT.

Тим часом проєкт Google Zip-NeRF перебуває на стадії дослідження, але нещодавні досягнення дозволили йому працювати приблизно у 22 рази швидше, ніж попередня модель mip-NeRF, і виробляти на 8-76% менше помилок. Результати виглядають абсолютно вражаючими (ця штука, мабуть, стане must have для рієлторів).

Можливості цієї технології обмежуються не лише створенням вау-ефектів у відео. Навпаки, у перспективі технологія NeRF може бути невіддільною частиною роботизації й подарує роботам "зір". Наприклад робот, якому дали завдання прибрати розлитий суп, може зайти на вашу кухню та використати цю технологію в поєднанні з процедурою генерації підказок від текстового ШІ типу GPT, щоб ідентифікувати та знайти в кімнаті низку предметів, що стосуються завдання, від совків і щіток до сміттєвих баків, раковин, шаф, ящиків, спреїв для чищення, пилососів тощо.

Також у цієї технології практично безкінечні можливості використання у відеоіграх. Наприклад, команда японських розробників працює над рендерингом 3D-сцен, згенерованих NeRF, у реальному часі в Unreal Engine. Команда каже, що вона вже досягає понад 60 кадрів в секунду на графічному процесорі nVidia RTX3070 з мінімальним споживанням пам’яті.

Раніше ми писали про 10 популярних професій, які можуть зникнути через генеративний штучний інтелект ChatGPT. За словами експертів, ШІ може виконувати роботу представників цих професій набагато швидше та ефективніше.