Для видео, где автомобиль проезжает по городскому пейзажу в стиле киберпанка, Google использовал подсказку «визг шин, рев двигателя, ангельская электронная музыка» для создания звука. Можно заметить, как звуковые эффекты совпадают с движением автомобиля. В другом примере создается подводный звуковой ландшафт с использованием подсказки «пульсирующие под водой медузы, морская жизнь, океан».
Пользователи могут добавлять текстовые подсказки, но DeepMind отмечает, что это необязательно. Кроме того, не нужно скрупулезно подбирать сгенерированное аудио к соответствующим сценам. Инструмент также может создавать неограниченное количество звуковых дорожек для видео, позволяя генерировать бесконечный поток вариантов аудиосопровождения.
Возможность генерировать саундтреки на основе видеоконтента может стать преимуществом инструмента DeepMind по сравнению с другими ИИ-решениями, например, от ElevenLabs. ElevenLabs использует только текстовые подсказки для создания аудио, тогда как инструмент DeepMind учитывает само видео. Это также может упростить процесс подбора аудио к видео, созданному с помощью искусственного интеллекта, например, Veo и Sora. Особенно это актуально для Sora, в которую планируется интегрировать поддержку звука.
DeepMind сообщает, что их инструмент обучался на видео, аудио и аннотациях, содержащих «подробные описания звуков и расшифровки разговорной речи». Это позволяет генератору синхронизировать звуковые события с визуальными сценами.
Инструмент не лишен недостатков. Например, DeepMind работает над улучшением синхронизации движения губ с диалогами (как видно из видео с пластилиновой семьей). Кроме того, компания отмечает, что качество видео влияет на работу системы — зернистое или искаженное изображение может привести к заметному снижению качества звука.
Инструмент DeepMind пока недоступен для широкого использования. Его еще должны проверить на безопасность и протестировать. Когда инструмент все же станет доступен, его аудиовыход будет содержать водяной знак Google SynthID, сигнализирующий о том, что звук создан искусственным интеллектом.
Филиал № 4 ОСФР по Москве и Московской области информирует:
В Московском регионе свыше 11,3 тыс. неработающих родителей получают пособие по уходу за ребенком до 1,5 лет
Филиал № 4 ОСФР по Москве и Московской области информирует:
За полгода 14,9 тысячи жителей Московского региона оформили страховую пенсию в автоматическом режиме на портале госуслуг
Обложка песни. Обложки альбомов песен. Сделать обложку для песни.
Отделение СФР по Москве и Московской области проактивно открыло свыше 32 тысяч СНИЛС новорожденным
Филиал № 4 ОСФР по Москве и Московской области информирует:
С начала года 86 тысяч работающих мам в Москве и Московской области получили пособие по беременности и родам
Филиал № 4 ОСФР по Москве и Московской области информирует:
Отделение СФР по Москве и Московской области выплатило единовременное пособие при передаче ребенка на воспитание в семью 474 семьям региона
Филиал № 4 ОСФР по Москве и Московской области информирует:
В Московском регионе свыше 11,3 тыс. неработающих родителей получают пособие по уходу за ребенком до 1,5 лет
Филиал № 4 ОСФР по Москве и Московской области информирует:
В Московском регионе свыше 11,3 тыс. неработающих родителей получают пособие по уходу за ребенком до 1,5 лет
Филиал № 4 ОСФР по Москве и Московской области информирует:
В Московском регионе свыше 11,3 тыс. неработающих родителей получают пособие по уходу за ребенком до 1,5 лет
Филиал № 4 ОСФР по Москве и Московской области информирует:
Отделение СФР по Москве и Московской области выплатило единовременное пособие при передаче ребенка на воспитание в семью 474 семьям региона
Филиал № 4 ОСФР по Москве и Московской области информирует:
С 1 августа Соцфонд увеличит страховые пенсии россиян
Филиал № 4 ОСФР по Москве и Московской области информирует:
С начала года 86 тысяч работающих мам в Москве и Московской области получили пособие по беременности и родам
Осторожно, слепни! Доктор Кутушов предупредил об опасных насекомых
Врач-офтальмолог, заведующий рефракционным отделением клиники микрохирургии глаза АйМед, офтальмохирург Кирилл Светлаков: что такое цифровая гигиена и как ей следовать
Жара? Пейте горячее! Доктор Кутушов назвал метод спасения от жары
Гигиена на пляже и в бассейне: Врач Кутушов рассказал как предотвратить заражение грибком
Жара? Пейте горячее! Доктор Кутушов назвал метод спасения от жары
Категория повышенного кешбэка в августе от Инго Экосистемы и Ингосстрах Банка
Сбер и Комитет по природопользованию, охране окружающей среды и обеспечению экологической безопасности Санкт‑Петербурга подписали соглашение о сотрудничестве
Ученый Елисеев назвал причину увеличения числа молний в Москве
