Технический аналитик на LLM-Router (экономика и качество LLM API) № 66614

LLM Router обеспечивает доступ к языковым моделям через API и маршрутизацию запросов между поставщиками. Проект растёт, и нам нужен независимый исполнитель-аналитик, который возьмёт на себя аудит экономики, биллинга и качества поставщиков. Что нужно будет сделать: Отчёт по себестоимости и маржинальности в разрезе поставщиков, моделей и маршрутов — с причинами изменений и оценкой потенциальных финансовых потерь. Реестр расхождений между внутренними логами и биллингом поставщиков: перечень, финансовый эффект, установленные причины. Карта ошибок тарификации и учёта (некорректный учёт параметров запросов, обрывы стриминга, неполные данные о токенах, повторные запросы и др.) с приоритизацией. Регламент тестирования и оценки поставщиков: критерии приёмки, тестовые сценарии, порядок фиксации результатов и регулярной переоценки. Настроенный процесс подключения и отключения поставщиков: чек-лист доступных настроек и порядок координации доработок с технической командой. Инструмент регулярной сверки логов с биллингом: автоматические проверки, уведомления об отклонениях, дашборд состояния поставщиков. Готовый процесс регулярной отчетности по состоянию поставщиков: существенные отклонения, риски, предложения по оптимизации. Предложения по порядку поставщиков в каскаде с учётом экономики, стабильности и ограничений — с обоснованием данныхми. Независимая оценка качества поставщиков и корректности внутреннего учёта на основе данных: ошибки, задержки, успешность запросов, переключения между маршрутами. Что мы ожидаем от исполнителя: Опыт самостоятельной аналитической работы в технических продуктах: от постановки задачи и проверки данных до выводов и внедрения изменений. Уверенное владение SQL: сложные объединения, оконные функции, агрегации, поиск пропусков и дублей, анализ больших