Чем предстоит заниматься
- Проектирование сценариев и пайплайнов: разработка сложных системных запросов и построение цепочек (агентов) с использованием визуальных инструментов (основной стек — Langflow);
- Сбор требований и общение с бизнесом: активное взаимодействие с бизнес-заказчиками и аналитиками. Умение слушать, задавать вопросы и переводить бизнес-задачи на язык логики для моделей;
- Тестирование и валидация: проведение качественного Side-by-side сравнения ответов моделей, оценка точности, релевантности и выявление галлюцинаций;
- Работа с LLMOps: ведение базы промптов, версионирование и отслеживание метрик через инструменты логирования (Langfuse или аналоги);
- Обмен опытом: участие в онбординге новых коллег, проведение внутренних демо и помощь команде в понимании возможностей LLM.
Требования
- Опыт работы с LLM: уверенное понимание архитектуры современных текстовых моделей, их ограничений и возможностей;
- Опыт или готовность работать с Langflow: понимание принципов создания LLM-цепочек в визуальных редакторах (или быстрое освоение этого инструмента);
- Коммуникативные навыки и открытость: готовность активно общаться с коллегами из разных отделов, умение объяснять логику работы моделей простыми словами;
- Базовые навыки автоматизации (Python): умение написать скрипт для вызова API, автоматизации тестирования или обработки данных (допускается использование AI-ассистентов / вайбкодинга);
- Понимание принципов RAG: концептуальные знания о векторных представлениях (эмбеддинги), семантическом поиске и косинусном расстоянии;
- Аналитический склад ума: умение структурировать требования, собирать тестовые датасеты и документировать решения (Jira / Confluence).