Nvidia анонсировала нейросеть Instant NeRF еще в марте 2022 года. Тогда многих впечатлили кадры с ее возможностями. Теперь функционал доступен всем желающим. Рассказываем, как работает Instant NeRF, как ее установить и опробовать.
Instant NeRF от Nvidia
Instant NeRF — это нейросеть, которая за считанные секунды может из нескольких двумерных изображений создать 3D-сцену. Для этого алгоритм использует обратный рендеринг — процесс, позволяющий моделировать приблизительное поведение света в реальном мире. Эта технология появилась еще до нейросети Nvidia, но именно эта компания смогла ускорить создание трехмерных сцен из 2D-изображений, сократив процесс до нескольких секунд.
Модель может быстро обработать несколько десятков фотографий, приняв при этом в расчет ракурсы камеры, с которых велась съемка, и затем визуализировать получившуюся 3D-сцену. Последний этап занимает десятки миллисекунд.
Nvidia могла монетизировать эту технологию, сделав из нее платный или подписной сервис, однако компания просто выложила исходный код нейросети на GitHub и рассказала, как его установить на свой компьютер. Но об этом чуть позже. Перед этим предлагаем вам взглянуть на то, что может сделать эта нейросеть:
И даже это еще не всё — посмотрите на рекламу МакДоналдса (не путать с «Вкусно — и точка»!), которая была создана на базе технологии Nvidia:
Конкретно в этом случае использовалась не нейросеть NeRF, а приложение Luma AI, но база у этих двух программ одна и та же — исходный код, созданный специалистами Nvidia.
Хотите сделать свой видеоролик? У специалистов TexTerra вы можете заказать съемку видео — за качество ручаемся.
Как установить Instant NeRF на компьютер
Начнем с требований. Конечно же, у вас должна быть видеокарта Nvidia — без нее никак. Поколение видеокарты определяет, какой из трех вариантов дистрибутива вы можете скачать. Посмотреть свою видеокарту в Windows вы можете через Диспетчер устройств во вкладке «Видеоадаптеры».
Установить Instant NeRF можно и на компьютер с Linux, а вот на macOS, увы, нейросеть не будет работать. Но перед скачиванием дистрибутива вам придется еще скачать пакет разработчика CUDA 12 версии размером 3,4 Гб, а также программу CMake версии v3.21 для сборки исходного кода. Также нужен компилятор с поддержкой C++ — подойдет Visual Studio 2019 или 2022.
Лишь после этого вы можете посмотреть инструкцию по установке — она довольно простая и заключается в скачивании архива и запуске всего одного файла .exe. Если вы лучше понимаете наглядные инструкции, Nvidia приготовила для вас видеогайд, который можно посмотреть ниже:
Мы попытались установить все компоненты на машину с подходящими характеристиками — Windows 10 и видеокартой Nvidia RTX 3060. Но при попытке установить пакет разработка CUDA система выдала ошибку и отказалась ставить программу. А без CUDA Instant NeRF работать не может.
А у вас получилось установить нейросеть Instant NeRF на компьютер? Отпишитесь в комментариях!
Читайте также:
Эта нейросеть восстанавливает старые фото – протестировали ее
Нейросеть создает 3D-модели по текстовому описанию — тест Point-E
Роботы-маркетологи: как нейросети изменят мир интернет-маркетинга