Розробники з Китаю представили інноваційну систему штучного інтелекту Qwen3.8-LiveTranslate. Ця передова модель забезпечує синхронний переклад у реальному часі, здатна не лише перекладати аудіо та відеоконтент, а й відтворювати його згенерованою мовою, точно копіюючи голос оригінального спікера.
Головні технічні особливості та можливості:
- Архітектура Thinker-Talker (Hybrid-MoE): В основі системи лежить зв’язка блоків «мислитель-оратор» на базі суміші експертів (MoE). Відеоряд, аудіопотік, вихідний текст і переклад об’єднані в єдину причинно-следственну цепочку, що дозволяє здійснювати розуміння та переклад за один прохід.
- Швидкість професійного синхроніста: Затримка моделі становить лише 2,8–3,3 секунди, що відповідає темпу роботи професійних перекладачів-синхроністів.
- Клонування голосу та інтонацій: Система в реальному часі копіює тембр, швидкість мови й емоційний темп спікера, синтезуючи переклад його власним голосом.
- Мультимодальність: Модель здатна не лише слухати аудіо, а й аналізувати відеоряд. Це допомагає штучному інтелекту правильно розпізнавати контекст та омоніми.
- Широкий функціонал: Qwen3.8-LiveTranslate підтримує роботу з 60 мовами, видає паралельний двоязиковий екран із субтитрами, впевнено тримає довгий контекст (імена та терміни не «пливуть») і може розрізняти кількох спікерів, підписуючи їхні фрази у реальному часі.
