Sonilo

Sonilo - нейросеть для создания музыки и звуковых эффектов по тексту или видео. Она умеет делать фоновую музыку под ролик, подбирать звук под монтаж и генерировать отдельные эффекты вроде шагов, удара, ветра или шума улицы.

По заявлениям создателей, Sonilo рассчитана именно на работу с видео: сервис анализирует темп, смену сцен и общее настроение ролика, а потом под это собирает саундтрек. Для музыки можно просто загрузить видео без длинного описания, а для более точного результата - добавить подсказку про жанр, настроение или инструменты.

Компания Sonilo отдельно делает упор на лицензирование исходных данных и коммерческое использование результата. В документации сервиса указано, что модель работает не только с текстом, но и с видео, а для звуковых эффектов умеет синхронизировать звук с происходящим в кадре.

Как это работает

Схема простая: вы либо пишете, какой звук или музыка нужны, либо загружаете видео, а модель подстраивает результат под задачу. В режиме музыки она старается сделать цельный фон на нужную длину. В режиме звуковых эффектов - добавляет отдельные шумы и действия так, чтобы они совпадали с происходящим на экране.

Для текста лучше писать конкретно. Вместо "сделай что-нибудь атмосферное" лучше указать "мягкий эмбиент с пианино, спокойное настроение, без резких ударных" или "короткий звук тяжёлой металлической двери, реалистично, с эхом".

Настройки

• Тип генерации - можно выбрать один из четырёх режимов: музыка по тексту, музыка для видео, звуковые эффекты по тексту или эффекты для видео.
• Задание - главный текстовый запрос. Тут лучше сразу описать стиль, настроение, источник звука и желаемый характер результата.
• Длительность - задаёт, сколько секунд будет идти музыка или эффект.
• Видео - загружается в режимах, где звук создаётся под ролик. Подходит для клипов, рекламных вставок, коротких сцен и анимации.
• Формат аудио - для звуковых эффектов можно выбрать итоговый файл: WAV, MP3, AAC или FLAC.

Для чего подойдёт

• сделать музыку для короткого ролика, чтобы не резать вручную готовый трек под 27 секунд
• озвучить анимацию, гифку или сцену без записи фоли: это шумы предметов и действий вроде шагов, хлопков, скрипов
• собрать фон для презентационного видео, где нужна спокойная музыка без слов
• добавить эффекты к игровому тизеру, сцене погони, заставке или рекламному ролику
• быстро проверить несколько вариантов настроения: тревожно, бодро, кинематографично, мягко

Ограничения

Sonilo заточена под фоновую музыку и прикладной звук для видео, а не под полноценные песни с куплетами и припевами. Когда запрос слишком расплывчатый, результат может выйти "в среднем по больнице" - без яркого характера или с не тем настроением, которое вы ожидали.

У таких инструментов бывает ещё одна типичная проблема: нейросеть лучше держит общий вайб сцены, чем очень тонкие авторские нюансы. Например, она может удачно передать напряжение в трейлере, но не всегда попадёт в редкий жанровый микс с точным набором инструментов с первой попытки.

Чем отличается от аналогов

Главная особенность Sonilo - упор на video-to-music, то есть музыку, которая строится от самого ролика, а не только от текста. У многих генераторов музыки в центре именно текстовый промпт, а здесь акцент сделан на том, чтобы саундтрек подхватывал монтаж, ритм и смену сцен.

Ещё одно отличие - работа сразу в двух направлениях: музыка и звуковые эффекты. Это удобно, когда для проекта нужен не один трек, а полное звуковое оформление: фон плюс отдельные шумы под действие в кадре.