Компания Google сделала значительный шаг в области перевода, представив набор новых моделей ИИ для перевода, всего за несколько часов после тихого запуска OpenAI ChatGPT Translate.
Новая семья моделей Google под названием TranslateGemma поддерживает 55 языков (в том числе украинский) и доступна в трех различных вариантах:
- 4B — для смартфонов;
- 12B — для ноутбуков;
- 27B — для облачных решений.
Основой для разработки послужила модель Gemma 3, которая была доработана с использованием методов контролируемой настройки (SFT) с использованием разнообразных данных — как человеческих переводов, так и синтетических от Gemini. По словам представителей Google, данный подход позволил моделям охватить даже языки с ограниченными ресурсами. Кроме того, для улучшения качества перевода использовалось обучение с подкреплением (RL).
Качество новой разработки проверялось с помощю MetricX — метрики, фиксирующей количество ошибок в переводе. Чем ниже балл, тем меньше выявленных ошибок: среди интересных данных, модель TranslateGemma с 12 миллиардами параметров продемонстрировала результат 3,60, что лучше, чем 4,04 у базовой модели с 27 миллиардами параметров (меньше ошибок на 26%).
Совсем новые модели от Google были обучены и протестированы на 55 языковых парах, включая такие языки, как испанский, французский, китайский, хинди и многие другие. Также предусмотрено обучение на почти 500 дополнительных языковых парах. Интересно, что помимо текста, ИИ может обрабатывать изображения и способен распознавать и переводить текст с фотографий, сканированных документов и скриншотов.
Все модели TranslateGemma доступны для загрузки на платформах Kaggle и Hugging Face.