Искусственный интеллект позволяет создавать видео каждому, но многие инструменты для создания таких видео не поддерживают звук. Компания Mirelo из Берлина разработала технологию, которая автоматически добавляет звуковые дорожки, синхронизированные с происходящим на видео.
Ранее в этом году Mirelo выпустила версию 1.5 своей модели Mirelo SFX, которая анализирует видео и добавляет соответствующие звуковые эффекты. Это привлекло внимание инвесторов, готовящихся к революции в области генеративного AI для игр. Стартап, основанный два года назад, привлек $41 млн в раунде финансирования, который возглавили Index Ventures и Andreessen Horowitz.
Полученные средства помогут Mirelo эффективнее конкурировать на рынке. Пока компания была в режиме скрытности и испытывала нехватку ресурсов, крупные игроки, такие как Sony и Tencent, а также китайская компания Kling AI и ElevenLabs, выпустили свои решения для преобразования видео в звуковые эффекты. Однако Mirelo выделяется более узкой специализацией и планирует значительно расширить команду — с 10 человек до 20-30 к концу следующего года.
Новые сотрудники поддержат исследования и разработки, а также работу над продуктом и стратегию выхода на рынок. Модели Mirelo уже доступны на платформах Fal.ai и Replicate, и основная часть дохода в краткосрочной перспективе будет поступать через API. Кроме того, Mirelo инвестирует в развитие творческой среды под названием Mirelo Studio, которая в будущем может стать инструментом для профессионалов.
Компания также серьезно относится к вопросам авторских прав: модели обучаются на публичных и приобретенных звуковых библиотеках, а также заключаются соглашения о распределении доходов с артистами. Mirelo не замещает музыкантов и звукооператоров, по крайней мере пока. Стартап ориентирован на аматоров и продвинутых пользователей с моделью freemium; рекомендуемый тариф для создателей контента стоит около 20 евро в месяц.
По словам сооснователя и CEO Mirelo CJ Simon-Gabriel, звук является неотъемлемой частью видео. Он цитирует Джорджа Лукаса, который сказал, что звук — это половина впечатлений от просмотра фильма. Звуковое сопровождение способно кардинально изменить атмосферу, даже если визуал остается тем же.
Основатели Mirelo сами являются исследователями AI и музыкантами, и в планах компании — генерация музыки с помощью AI. Однако сейчас спрос больше на звуковые эффекты, поскольку в этой области меньше исследований, что дает Mirelo возможность создать уникальные конкурентные преимущества.
Компания уже привлекла 44 миллиона долларов в общей сложности, включая предыдущий раунд, возглавляемый берлинской фирмой Atlantic. Среди инвесторов — известные эксперты из индустрии, что повышает доверие к технологии и открывает новые возможности.
Mirelo понимает, что в будущем AI-видео не останутся без звука. Например, генератор видео Gemini уже использует звуковые дорожки на базе модели DeepMind Veo 3.1. По словам Simon-Gabriel, сейчас многие понимают необходимость добавления звука, сравнивая это с переходом от немых фильмов к звуковым — это действительно меняет восприятие.
