LibreTranslate

Когда перевод встречается с идеалами открытого кода: что такое LibreTranslate

В то время как гиганты вроде Google Translate и DeepL практически монополизировали сферу машинного перевода, незаметно набирает силу полностью открытый, саморазмещаемый инструмент нейронного машинного перевода. Это LibreTranslate — открытое API, построенное на движке Argos Translate. Вам не нужно передавать конфиденциальные текстовые данные на сторонние серверы, и не придётся платить за количество запросов — достаточно обычного сервера, чтобы построить собственную фабрику многоязычного перевода. Сама эта философия является глубоким переворотом доминирующей модели «перевод как услуга».

Ключевые преимущества: триада приватности, свободы и контроля

Самое острое оружие LibreTranslate — три взаимосвязанных преимущества. Первое — абсолютный возврат суверенитета над данными. Все процессы перевода выполняются на вашем собственном оборудовании, коммерческие контракты, внутренняя переписка, личная информация пользователей не покидают сетевой периметр. Для отраслей с жёсткими требованиями к комплаенсу, таких как медицина, юриспруденция и финансы, это практически индульгенция. Второе — высокая пластичность технологического стека: в основе лежит Argos Translate, использующий модели OpenNMT, и хотя объём параметров одной модели уступает гигантским мультимиллиардным моделям, его преимущество в лёгкости и возможности точной настройки — можно дообучать модели на собственных доменных корпусах и создавать специализированный переводческий движок. Третье — настоящие нулевые предельные издержки, без ежемесячных подписок, без ограничений по количеству знаков, только расходы на электроэнергию и аппаратное обеспечение. При больших и стабильных объёмах перевода долгосрочная экономическая эффективность полностью превосходит все коммерческие API.

Целевая аудитория: кому больше всего нужен этот открытый скакун

Строго говоря, LibreTranslate подходит не всем. Портрет его идеального пользователя очень чёток:

• Корпоративные разработчики, для которых приватность на первом месте — команды, которым нужна встроенная функция перевода и которые не могут позволить себе передачу данных вовне. Развернув LibreTranslate в частном кластере, перевод становится такой же базовой инфраструктурой, как база данных.
• Независимые хакеры из сообщества открытого ПО — техногики, увлечённые созданием собственных инструментов и не приемлющие привязку к вендору. Они наслаждаются всем процессом: от загрузки Docker-образа, настройки обратного прокси Nginx до мониторинга загрузки GPU.
• Некоммерческие организации и академические учреждения — с ограниченным бюджетом, но потребностью в покрытии множества редких языков, особенно тех языковых пар, которые слабо поддерживаются коммерческими API. Список языков LibreTranslate постоянно растёт, а активный вклад сообщества заполняет ниши редких языков.
• Интеграторы аппаратных решений с автономным переводом — стремящиеся к работе устройств перевода и встраиваемых систем в офлайн-среде, где при достаточной производительности возможен полностью локальный запуск.

Если вы лишь время от времени переводите несколько фраз и не интересуетесь техническими настройками, вероятно, стоит держаться на расстоянии. Но если вы относитесь к одной из перечисленных групп, LibreTranslate — это настоящая золотая жила, ждущая своего исследователя.

Опыт использования: между аскетичностью и мощью

При первом знакомстве LibreTranslate производит впечатление прямолинейного, даже немного грубоватого инструмента. У него нет яркого веб-интерфейса, официально предлагается лишь минималистичная демо-страница и комплект REST API. Но именно этот «отказ от UI» делает интеграцию на удивление чистой. Несколько строк curl-команд — и вызов выполнен: указываете исходный язык, целевой язык и текст для перевода, и через несколько секунд получаете результат. Стандартизированный формат ответов обеспечивает высокую совместимость с коммерческими API и минимальную стоимость миграции.

Что касается качества перевода, здесь нужен трезвый взгляд. В общеупотребительной тематике LibreTranslate хорошо показывает себя для основных европейских языковых пар, таких как английский-французский и английский-испанский, точность бытовых диалоговых текстов достигает 70–80%, чётко передавая исходный смысл. Однако столкнувшись со сленгом, игрой слов или высокохудожественными предложениями, он заметно уступает таким специалистам по тонкой передаче смысла, как DeepL. Приятным сюрпризом становится то, что для некоторых пар из числа низкоресурсных языков, например, каталанский-итальянский, его результаты превосходят даже отдельные коммерческие движки — заслуга стремления сообщества Argos Translate к равномерному охвату.

Самостоятельное развёртывание — самый высокий порог во всей цепочке использования. Официальный Docker-образ доступен, после загрузки и несложной настройки система работает, но если требуется ускорение на GPU, необходимо дополнительно установить поддержку CUDA и скорректировать переменные окружения. На облачном сервере с NVIDIA Tesla T4 задержка перевода одного предложения может составлять менее 200 миллисекунд, а пропускной способности достаточно для поддержки потребностей в переводе в реальном времени на сайтах среднего размера. Весь процесс напоминает строительство моста с помощью командной строки: пусть он и не так отполирован, как коммерческие продукты, но как только мост построен, вы обретаете полный суверенитет.

Будущее открытого перевода: не только замена

Значение LibreTranslate не в том, чтобы прямо сейчас превзойти коммерческих гигантов, а в том, что он предлагает принципиально иной способ владения переводом. Он превращает машинный перевод из «услуги» в «способность», из «подписки» — в «свободу». В эпоху пробуждения осознания конфиденциальности данных и растущих требований технологического суверенитета подобные инструменты обречены вырасти из игрушек нишевых разработчиков в стандартные компоненты корпоративных архитектур. Если вас влечёт идея контроля над потоками языка, начните пробовать прямо сейчас — двери его API всегда открыты, и ключ от них прямо в ваших руках.