Разработчик программного обеспечения — Amharic Tokenizer@ Amharic Tokenizer

О позиции

Компания Amharic Tokenizer разрабатывает открытый Python-пакет, который направлен на создание эффективных и мощных больших языковых моделей (LLMs) для письма на основе скрипта Фидель, с акцентом на амхарский язык. Ваша роль как разработчика программного обеспечения будет заключаться в реализации подхода BPE, учитывающего амхарские слоги, который разбивает слоги Фиделя на базовые согласные и гласные маркеры. Это значительно уменьшает размер словаря и вычислительные требования.

Чем вы будете заниматься

• Разработка и оптимизация алгоритмов для обработки амхарского языка.
• Реализация и поддержка BPE-подхода для уменьшения размера словаря.
• Работа с Cython для максимизации скорости выполнения.
• Тестирование и отладка программного обеспечения для обеспечения его надежности и производительности.
• Сотрудничество с командой для интеграции новых функций и улучшений.

Требования

• Опыт разработки программного обеспечения на Python.
• Знание алгоритмов обработки естественного языка.
• Опыт работы с Cython или другими языками, оптимизирующими производительность.
• Способность работать в команде и эффективно общаться.
• Знание амхарского языка будет плюсом.

Будет плюсом

• Опыт работы с большими языковыми моделями.
• Знание других языков программирования, таких как C++.
• Опыт работы с Git и системами контроля версий.

Что мы предлагаем

• Конкурентоспособная зарплата в размере от 200 000 до 300 000 ₽ в месяц.
• Удаленная работа с гибким графиком.
• Возможности для профессионального роста и развития.
• Работа над интересными и инновационными проектами.
• Поддержка в обучении и развитии навыков.