Как работает синхронный ИИ-перевод

Interpretwise берёт один чистый аудиосигнал с вашей сцены, распознаёт речь, переводит её с помощью ИИ, учитывающего контекст, и озвучивает естественными нейросетевыми голосами одновременно на всех целевых языках - параллельно формируя живые субтитры на каждом из них.

Конвейер обработки

Всё начинается с одного аудиосигнала и заканчивается на устройстве каждого слушателя - параллельно для каждого языка:

  1. 1

    Звук со сцены

    Один сигнал с вашего микшерного пульта - любое количество микрофонов, панельных дискуссий и источников воспроизведения, сведённых вашим звукорежиссёром ровно так же, как и сегодня.

  2. 2

    Распознавание речи

    Потоковое распознавание с анализом фраз ждёт, пока фраза стабилизируется, поэтому на перевод поступают законченные, устоявшиеся предложения, а не обрывки.

  3. 3

    ИИ-перевод

    Перевод с учётом контекста удерживает текущий контекст выступления и соблюдает глоссарий и терминологию вашего мероприятия.

  4. 4

    Нейросетевой голос

    Естественный нейросетевой голос говорит на каждом целевом языке параллельно - один канал на язык.

  5. 5

    Доставка

    Звук и живые субтитры доходят до каждого слушателя по WebRTC - на смартфоны в зале, в браузеры удалённых слушателей, на экраны площадки и в продакшн-инструменты.

Сквозная задержка составляет обычно около 5 секунд от произнесённой фразы до переведённого голоса. Платформа измеряет её непрерывно: после каждой сессии вы получаете отчёт о задержке по каждому языку (медиана и p99), поэтому качество подтверждается данными, а не впечатлениями.

Движки и голоса

Interpretwise использует несколько движков распознавания речи, перевода и синтеза голоса и подбирает лучшую комбинацию для каждой языковой пары, с автоматическим переключением между движками прямо во время сессии. Голоса доступны в двух уровнях:

  • Голоса Premium - Самый естественный вариант, рекомендуемый для сценического контента.
  • Голоса Standard - Большой каталог, охватывающий весь набор языков по более низкому тарифу.

Человек в процессе

На одном мероприятии можно сочетать ИИ-перевод и работу профессиональных синхронистов - канал за каналом: например, ИИ для шести языков и переводчик для седьмого. Переводчики работают откуда угодно через консоль в браузере - без установки, с защитой кодом доступа для конкретного мероприятия.

Что видят и слышат участники

Участники сканируют QR-код, выбирают язык и слушают на собственном смартфоне - с живыми субтитрами на том же языке. Без приложения, без аккаунта, без раздачи наушников. Полный путь участника описан в разделе Аудитория без наушников.

Страница прослушивания Interpretwise на смартфоне: перевод на немецкий с живыми субтитрами
Вид участника: переведённый звук с живыми субтитрами на собственном смартфоне участника.

Посмотрите вживую

Попробуйте Interpretwise на вашем мероприятии

Более 40 языков в реальном времени - без кабин и специальных приёмников. Участники сканируют QR-код и слушают на своих телефонах. Полная настройка занимает около 15 минут.