По словам Варуна Джампани, руководителя отдела 3D-исследований Stability AI, Stable Video 4D найдет применение в кинопроизводстве, игровой индустрии, дополненной и виртуальной реальности, а также в других областях, где необходимо динамически просматривать 3D-объекты под разными углами.
Это не первый шаг Stability AI в мире 3D. В марте компания анонсировала Stable Video 3D, позволяющую создавать короткие 3D-видео из изображений или текстовых запросов. Новая модель, Stable Video 4D, включает в себя ширину (x), высоту (y), глубину (z) и время (t), что позволяет просматривать движущиеся 3D-объекты с различных углов и в разные моменты времени.
Джампани отметил, что ключевыми аспектами разработки Stable Video 4D стало сочетание возможностей моделей Stable Video Diffusion и Stable Video 3D с дополнением специально подобранного набора данных динамических 3D-объектов. В отличие от существующих моделей, использующих отдельные сети для генерации видео и создания новых ракурсов, Stable Video 4D выполняет обе задачи в одной сети.
Также Джампани https://venturebeat.com/ai/stability-ai-steps-into-a-new-gen..., что в новой модели по-другому работают механизмы внимания, что позволяет каждой видеокадру взаимодействовать с соседними кадрами под разными углами обзора или в разные моменты времени. Это обеспечивает лучшую 3D-целостность и временную плавность выходных видео.
Метод работы Stable Video 4D отличается от генеративного дополнения, где сети обычно завершают частично предоставленную информацию. Новая модель полностью синтезирует восемь новых видео с разных ракурсов, используя исходное видео в качестве ориентира, без явной передачи пиксельной информации.
На данный момент Stable Video 4D доступна для исследовательской оценки на платформе https://huggingface.co/stabilityai/sv4d . Компания Stability AI пока не анонсировала коммерческие варианты использования модели, но планирует в будущем расширить её возможности для обработки более длинных и сложных сцен.
Начальник Главного управления вневедомственной охраны Росгвардии вручил ключи от автомобиля многодетному отцу-росгвардейцу
Филиал № 4 ОСФР по Москве и Московской области информирует:
Родители 240,5 тыс. детей в Московской области получают единое пособие
Более 40 тысяч семей в Москве и области получают ежемесячные выплаты из средств материнского капитала
Филиал № 4 ОСФР по Москве и Московской области информирует:
За полгода 14,9 тысячи жителей Московского региона оформили страховую пенсию в автоматическом режиме на портале госуслуг
Готовьтесь к задержкам по 3-4 часа на всё: аэропорт Анталии стал портом притеснения - российские туристы жалуются на дикий бардак с багажом, взлётом и посадкой, а их привозят за 6-7 часов до вылета
Представители «Метровагонмаш-Сервиса» посетили СЛД «Москва-Сортировочная» филиала «Московский» компании «ЛокоТех-Сервис» для обмена опытом
DCLogic вошла в топ-10 самых эффективных ИТ-компаний страны 2023 по версии CNews
Туманы начала июня на Ладоге
Филиал № 4 ОСФР по Москве и Московской области информирует:
С начала 2024 года 140 тысяч женщин и новорожденных Московского региона получили услуги по родовым сертификатам
Филиал № 4 ОСФР по Москве и Московской области информирует:
За полгода 14,9 тысячи жителей Московского региона оформили страховую пенсию в автоматическом режиме на портале госуслуг
A Google Doodle animator is my new favorite Elden Ring lore theorist thanks to this cartoon retelling of Shadow of the Erdtree set to a Taylor Swift song
Игра Legend of Goddess: The Last War с откровенными скинами персонажей появилась на Android
Гайд по регистрации, установке и входу в Throne and Liberty для игроков из России и СНГ
Warner Bros acquires MultiVersus devs as it shifts focus to free-to-play
Филиал № 4 ОСФР по Москве и Московской области информирует:
За полгода 14,9 тысячи жителей Московского региона оформили страховую пенсию в автоматическом режиме на портале госуслуг
Более 40 тысяч семей в Москве и области получают ежемесячные выплаты из средств материнского капитала
Филиал № 4 ОСФР по Москве и Московской области информирует:
Родители 240,5 тыс. детей в Московской области получают единое пособие
«Резкое изменение»: москвичей предупредили об очередных погодных сюрпризах
В заминированном поезде Липецк - Москва ехал хедлайнер концерта в честь Дня Города Липецка, финалист шоу “Голос” Сергей АРУТЮНОВ
Сергей Собянин. Неделя мэра
Уссурийский УЛРЗ проводит оздоровительную кампанию 2024
24 июля директор филиала «Северный» ООО «ЛокоТех-Сервис» Андрей Дружков провёл встречу с участниками ключевого кадрового резерва на управленческие должности.
