Переводческие наушники набирают обороты, но их реальное использование может оказаться не совсем тем опытом, который вы ожидаете. Вот что они делают и чего вы можете реально ожидать.

Переводческие наушники работают в три основных этапа: распознавание речи, машинный перевод и синтез речи. С помощью микрофонов они улавливают голос говорящего, при этом модели высокого класса, такие как Soundcore Liberty 5 Pro, используют восемь микрофонов и ИИ для разделения голосов. Аудио обрабатывается на подключенном телефоне, в облаке или на обоих—Apple Air Pods Pro выполняет все процессы на i Phone, а Google Pixel Buds требуют подключения к интернету.

Во время обработки распознавание речи преобразует звук в текст, затем переводит его с помощью NLP и иногда LLM, таких как Chat GPT. Наконец, синтетический голос генерирует аудио, которое отправляется обратно в ваши наушники через Bluetooth. Некоторые модели, включая Apple Air Pods Pro и Galaxy Buds Pro, могут работать офлайн, но другим требуется стабильное соединение.

По сравнению с ранними днями, переводческие наушники работают намного лучше, но заявленная точность 95% или 99% — это маркетинговый хайп. Реальные условия—нечеткая речь, сленг, фоновый шум—вызывают задержки и неточности. Офлайн-использование также ограничивает языковые пары, например, 14 вариантов Timekettle.