AI/ML Engineer — повышение качества RAG-агентов@ СберСпасибо

О позиции

В команде СберСпасибо открыта вакансия AI/ML Engineer, который будет заниматься повышением качества RAG-агентов. Эта роль включает в себя работу по трем направлениям: поиск по технической документации, нормативной базе и бухгалтерской документации. Вы будете заниматься промпт-инжинирингом и контекст-инжинирингом для всех агентов команды.

Чем вы будете заниматься

• Повышение качества RAG-агентов через A/B-тестирование промптов и моделей.
• Подготовка эталонных наборов оценки качества и реализация LLM-as-a-judge.
• Настройка защит для production-агентов, включая фильтры от инъекций в промпт и валидацию выходов.
• Тюнинг качества по сигналам обратной связи пользователей и трассировкам из Langfuse.
• Работа с фреймворками оценки, такими как Ragas и DeepEval.

Требования

• Опыт работы с Python от 2 лет в коммерческой разработке.
• Практический опыт RAG-систем в продакшене: эмбеддинги, векторные базы (Qdrant, FAISS или pgvector).
• Опыт построения и поддержки RAG-решений от начала до конца.
• Знания в области оценки качества LLM-систем и работы с агентскими протоколами.
• Опыт работы с одним LLM-фреймворком, например, LangChain или OpenAI API.

Будет плюсом

• Опыт работы с SQL и реляционными базами данных на базовом уровне.
• Знания в области защиты от утечек персональных данных.

Что мы предлагаем

• Конкурентная зарплата в диапазоне 300 000 - 500 000 ₽ в месяц.
• Работа в команде профессионалов в области AI и ML.
• Возможности для профессионального роста и развития.
• Доступ к современным технологиям и инструментам.
• ДМС и другие социальные гарантии.