SKILLEMALL.ai

BF ml-engineering

Планирует и выполняет инженерные работы по ML для производства — обучение и дообучение моделей (LoRA/QLoRA), оценка и разработка наборов для оценки, решения по квантованию, развертывание инференса, происхождение, соответствие функций, реагирование на дрейф и триаж регрессий, основанные на практических инженерных шаблонах для производственных ML-систем. Не используйте для статистического моделирования и экспериментального дизайна (это задача специалиста по данным) или для эксплуатации конкретного инференс-движка (это навык инструмента, такой как llama-cpp или vllm).

машинный переводПоказать оригиналСкрыть оригинал«Plan and execute production ML engineering work — model training and f…»

Plan and execute production ML engineering work — model training and fine-tuning (LoRA/QLoRA), evaluation and eval-set design, quantization decisions, inference deployment, lineage, feature parity, drift response, and regression triage, grounded in practical engineering patterns for production ML systems. Do not use for statistical modeling and experimental design (that's the data scientist) or for operating a specific inference engine (that's a tool skill such as llama-cpp or vllm).

magnus919/agent-skills Agent Skills автор: magnus919 MIT 15 файлов · 2 скрипта тело ≈ 1 280 токенов Открыть источникgithub.com↗ проанализирован 26 ч назад

Планирует и выполняет инженерные работы по ML для производства — обучение и дообучение моделей (LoRA/QLoRA), оценка и разработка наборов для оценки, решения…

Как процесс F 26/100 · Не запустится — Скилл ссылается на файлы, которых нет в архиве: ../vllm/SKILL.md, ../llama-cpp/SKILL.md

АнализаторДанные и аналитикаИнфраструктураИИ и агентытип и темы размечены автоматически по тексту скилла
JSON
Технический рейтинг
B
90/100
безопасность, качество, тесты
Безопасность 60%
100
Качество 40%
74
Прогон на моделях
не было
Процессный рейтинг
F
26/100
Не запустится
Скилл ссылается на файлы, которых нет в архиве: ../vllm/SKILL.md, ../llama-cpp/SKILL.md
Инструменты и файлы вес 18
0
Шаги вес 15
0
Результат и критерий готовности вес 14
0
три самых слабых из десяти параметров · все десять

Как улучшить

  1. В тексте есть ссылки на отсутствующие файлы: добавьте файлы или уберите ссылки.
Для прогона на моделях — необязательно
  • spec.yaml с триггерными фразами и утверждениями — контракт поведения для CI; `skilltest init` создаст шаблон.

Находки guard · 0

✓ Критических и высоких находок нет

Просканировано файлов: 14. Улики замаскированы. Пометки в серых чипах объясняют, почему серьёзность понижена.

По спецификации Agent Skills

  • предупреждение missing-ref ссылка на отсутствующий файл: ../vllm/SKILL.md
  • предупреждение missing-ref ссылка на отсутствующий файл: ../llama-cpp/SKILL.md

Процессный рейтинг: все десять параметров 26/100

Не запустится. Скилл ссылается на файлы, которых нет в архиве: ../vllm/SKILL.md, ../llama-cpp/SKILL.md
  • 0Инструменты и файлы. Не хватает 2 файла(ов): ../vllm/SKILL.md, ../llama-cpp/SKILL.md
  • 0Шаги. Инструкция сплошным текстом, шаги не выделены
  • 0Результат и критерий готовности. Не сказано, что считать результатом
  • 0Входы и предусловия. Не сказано, что нужно иметь на входе
  • 0Отчётность по ходу. Скилл ничего не сообщает по ходу работы
  • 30Повторный запуск. Изменяющих операций: 6, без проверки текущего состояния
  • 50Когда включается. Не сказано, при каком запросе скилл включается
  • 50Ошибки и развилки. Развилок: 0, есть раздел про ошибки
  • 100Согласованность. Имя и обязательные поля на месте
  • 100Стоимость исполнения. Тело инструкции 1280 токенов
  • low Среди тестов нет случая на инъекцию через данные

Всё перечисленное измерено по тексту скилла, а не оценено моделью: цифры проверяемы. Вес параметра тем больше, чем чаще из-за него процесс встаёт.

Сигналы качества

  • +5В description нет примеров фраз, по которым скилл должен срабатывать
  • +3Нет пошаговых инструкций или чек-листа
  • +3Формат ответа не описан: модель каждый раз решает сама
  • +4Нет примеров входа/выхода
  • -31 из 2 скриптов не упомянуты в SKILL.md
  • +2Инструкции на одном языке
  • +4Описание говорит, когда скилл НЕ применять
  • +3Длина description 488 символов: достаточно сигнала, не съедает бюджет
  • +4Структура: 8 заголовков
  • +4Справочные файлы упоминаются в инструкциях (5 из 5)
  • +1Лицензия указана

База качества 70; замечания lint вычитаются, сигналы прибавляют до 100. Итог: 74.