Компания Aug X выпустила Augie, платформу для создания видео на основе ИИ, включающую функцию клонирования голоса для озвучивания рекламных роликов без записи в студии.
В партнерстве с ElevenLabs, Aug X позволяет пользователям записать свой или чужой голос и клонировать его для использования в других коротких видео. Платформа Augie, ориентированная в первую очередь на маркетологов и команды социальных сетей, позволяет людям быстро добавлять озвучку, фото, текст и музыку к видео без необходимости изучать аудио- и видеомонтаж.
Основатель Aug X Джереми Тоеман сказал, что компания захотела добавить функцию клонирования голоса, поняв, что некоторым людям не нравится говорить в микрофон или записывать закадровый текст.
«Вы бы удивились, сколько людей, которые использовали нашу функцию клонирования голоса, подходили к нам и благодарили, потому что им не нравилось записывать закадровый текст», — говорит он.
В демонстрации для The Verge Тоеман говорит, что пользователи могут либо написать, либо загрузить сценарий в Augie, а затем использовать предварительно записанный голос (люди должны записать короткий фрагмент своего голоса, говорящий что угодно) или выбрать один из библиотеки. Этот голос затем прочитает сценарий с интонацией — серьезной, воодушевленной, жуткой и т.д. — которая может быть отрегулирована в зависимости от настроения видео.
Пользователи также могут выбирать из библиотеки фотографий — Aug X лицензирует фотографии от Getty — или использовать сгенерированные ИИ изображения для добавления в видео.
Тоеман предполагает, что маркетинговые команды будут быстро создавать короткие видео без необходимости бронировать время своего представителя в студии звукозаписи.
Augie перешла в публичную бета-версию в мае. Пока все пользователи Augie имеют доступ к функции клонирования голоса. Тоеман говорит, что в конечном итоге компания может ограничить длину и качество видео, а также количество склонированных голосов неплатящих подписчиков из-за расходов на работу серверов клонирования голоса со своими партнерами.
Клонирование голоса не ново; Samsung даже позволяет людям использовать ИИ-голос для ответа на звонки, а теперь такие компании, как Aug X, интегрируют эту технологию в более полнофункциональные сервисы. После того, как вирусно распространилась поддельная песня Дрейка с ИИ-сгенерированным голосом рэпера, это помогло возродить опасения по поводу авторских прав и незаконного использования чужого образа.
«Мы предвидели, что может пойти не так, поэтому очень осторожны в отношении того, кто может использовать предварительно записанный голос для клонирования», — говорит Тоеман.
Он добавил, что записанные голоса, в отличие от тех, которые являются частью общей библиотеки Augie, будут доступны только отдельным аккаунтам. Таким образом, другой человек в той же организации должен повторно записать голос своего представителя в свой аккаунт Augie, чтобы клонировать его речь. Пользователи не могут загружать записи, и платформа будет принимать только голоса, записанные вживую с микрофоном.
Компания также работает со своим партнером по клонированию голоса ElevenLabs над идентификацией сгенерированных ИИ голосов и видео.