AIKraft/Skills/arize-evaluator

arize-evaluator

Обрабатывает рабочие процессы оценки с помощью LLM-as-judge и кодовых оценщиков в Arize, включая создание/обновление оценщиков, запуск оценок для спанов или экспериментов, управление задачами, операции trigger-run, сопоставление столбцов и непрерывный мониторинг. Используйте, когда пользователь упоминает создание оценщика, LLM judge, кодовый оценщик, галлюцинации, достоверность, правильность, релевантность, запуск оценки (run eval), оценку спанов, оценку эксперимента, trigger-run, сопоставление столбцов, непрерывный мониторинг или улучшение промпта оценщика.

arize-ai official Другое

Что делает навык

Обрабатывает рабочие процессы оценки с помощью LLM-as-judge и кодовых оценщиков в Arize, включая создание/обновление оценщиков, запуск оценок для спанов или экспериментов, управление задачами, операции trigger-run, сопоставление столбцов и непрерывный мониторинг. Используйте, когда пользователь упоминает создание оценщика, LLM judge, кодовый оценщик, галлюцинации, достоверность, правильность, релевантность, запуск оценки (run eval), оценку спанов, оценку эксперимента, trigger-run, сопоставление столбцов, непрерывный мониторинг или улучшение промпта оценщика.

Как подключить

1Скачать навык
# возьмите папку навыка «arize-evaluator» из репозитория: # https://github.com/arize-ai/arize-skills
2Положить папку с SKILL.md к навыкам ассистента
# положите папку навыка туда, где ассистент ищет skills: cp -r arize-evaluator/ ~/.claude/skills/arize-evaluator/

Навык — папка с файлом SKILL.md (описание + инструкции) и опциональными скриптами. Ассистент (Claude, Claude Code и совместимые) подхватывает его по описанию и следует шагам.