Світ Генеративного ШІ: Переклад і Технології Відео

Ізраїльський стартап Panjaya, заснований фахівцями з глибинного навчання Хіліком Шані та Аріелем Шаломом, вивів на ринок інноваційний інструмент для озвучення відео — BodyTalk. Цей продукт дозволяє створювати реалістичний переклад із збереженням оригінального голосу, автоматично підлаштовуючи міміку та рухи обличчя мовця до нової мови. Такий підхід до генеративного штучного інтелекту став можливим завдяки унікальній технології Panjaya, яка забезпечує природну синхронізацію мовлення та рухів.

Після трьох років розробки Panjaya залучила $9,5 млн зовнішнього фінансування, а до команди приєднався досвідчений Гай Пієкарц, який раніше продав Apple свій стартап із рекомендацій відеоконтенту. Він допомагає компанії просуватися на B2B ринку.

BodyTalk підтримує аудіопереклад на 29 мов із автоматичним налаштуванням артикуляції під нові фрази. Користувачі можуть завантажувати свої відео на платформу, де система адаптує їх під особливості нової мови. Panjaya також планує запровадити API і забезпечити обробку відео майже в реальному часі, що робить рішення привабливим для великих компаній. Серед клієнтів Panjaya — TED і JFrog, які відзначають зростання залученості аудиторії завдяки перекладу контенту.

Panjaya приділяє значну увагу безпеці технологій, захищаючи свої розробки від зловживань. Гай Пієкарц зазначив, що Panjaya створює «глибоко реалістичні» відео, уникаючи асоціацій із терміном «deepfake», який має негативний відтінок. У майбутньому компанія розглядає можливість додавання водяних знаків для захисту від нечесного використання синтетичних медіа.

На світовому ринку переклад відеоконтенту є дуже актуальним, оскільки аудиторія віддає перевагу контенту рідною мовою. Panjaya пропонує рішення, яке може замінити субтитри, роблячи контент більш природним і привабливим, що підтверджується статистикою від TED: перегляди дублів за допомогою Panjaya зросли на 115%.

Серед конкурентів Panjaya — такі відомі компанії, як Vimeo та ElevenLabs, а також менші стартапи. Проте команда Panjaya вірить, що їхній підхід до генерації контенту та висока якість синхронізації забезпечать продукту сильні позиції на ринку дубльованого відео.