SKILLEMALL.ai

BF agents-optimize

Используйте при измерении или улучшении качества и производительности агента — настраивайте оценщиков, онлайн-мониторинг, ворота качества CI/CD, наблюдаемость или оптимизацию затрат. Триггеры: «оцени моего агента», «добавить оценщика», «измерить качество», «ворота качества», «запустить оценки», «агент слишком медленный», «почему он медленный», «уменьшить задержку», «настроить наблюдаемость», «дашборд CloudWatch», «сколько стоит мой агент», «оптимизация затрат», «логи не отображаются», «логи отсутствуют», «спаны не найдены», «оценка не удалась», «ошибка оценки», «трассировки разработки», «локальные трассировки», «трассировки agentcore разработки», «трассировки в CloudWatch». Не для отладки ошибок или сбоев — используйте agents-debug. Медленные, но правильные маршруты сюда; сломанные маршруты для отладки.

машинный переводПоказать оригиналСкрыть оригинал«Use when measuring or improving agent quality and performance — set up…»

Use when measuring or improving agent quality and performance — set up evaluators, online monitoring, CI/CD quality gates, observability, or cost optimization. Triggers on: "evaluate my agent", "add evaluator", "measure quality", "quality gate", "run evals", "agent too slow", "why is it slow", "reduce latency", "set up observability", "CloudWatch dashboard", "how much does my agent cost", "cost optimization", "logs not showing up", "logs missing", "spans not found", "eval failing", "eval error", "dev traces", "local traces", "agentcore dev traces", "traces to CloudWatch". Not for debugging errors or crashes — use agents-debug. Slow but correct routes here; broken routes to debug.

ClawHub Agent Skills автор: Amazon Web Services 1 файл тело ≈ 693 токенов Открыть источникclawhub.ai проанализирован 33 ч назад

Используйте при измерении или улучшении качества и производительности агента — настраивайте оценщиков, онлайн-мониторинг, ворота качества CI/CD, наблюдаемость…

Как процесс F 58/100 · Не запустится — Скилл ссылается на файлы, которых нет в архиве: references/evals.md, references/observability.md, references/cost.md

ПроцедураИИ и агентыИнфраструктуратип и темы размечены автоматически по тексту скилла
JSON
Технический рейтинг
B
89/100
безопасность, качество, тесты
Безопасность 60%
95
Качество 40%
80
Прогон на моделях
не было
Процессный рейтинг
F
58/100
Не запустится
Скилл ссылается на файлы, которых нет в архиве: references/evals.md, references/observability.md, references/cost.md
Инструменты и файлы вес 18
0
Ошибки и развилки вес 10
0
Отчётность по ходу вес 2
0
три самых слабых из десяти параметров · все десять

Чем это грозит

Находки средней серьёзности: скорее всего скилл честный, но прочитайте, что именно насторожило сканер.

Широкие права средняя серьёзность

Ниже описан худший случай для этой категории. Здесь находка средней серьёзности: guard увидел признак, но не доказательство.

Если установить

Скилл просит больше прав, чем нужно для задачи: широкий доступ к инструментам, секретные переменные окружения, бинарные файлы. Каждое лишнее право расширяет ущерб при ошибке или взломе.

Автору

Сузьте allowed-tools и список переменных до минимума, замените бинарники на исходники или скрипты, которые можно прочитать.

Как улучшить

  1. В тексте есть ссылки на отсутствующие файлы: добавьте файлы или уберите ссылки.
Для прогона на моделях — необязательно
  • Свои кейсы (evals/evals.json, 4–6 реальных запросов с ожидаемыми ответами): тогда полная проверка прогонит именно их, а не черновик от модели.
  • spec.yaml с триггерными фразами и утверждениями — контракт поведения для CI; `skilltest init` создаст шаблон.

Находки guard · 1

✓ Критических и высоких находок нет

Средние и низкие: 1
  • средняя Широкие права meta-broad-allowed-tools SKILL.md:1
    Заранее разрешены широкие инструменты: Bash
    allowed-tools: Read Grep Glob Bash

Просканировано файлов: 1. Улики замаскированы. Пометки в серых чипах объясняют, почему серьёзность понижена.

По спецификации Agent Skills

  • предупреждение missing-ref ссылка на отсутствующий файл: references/evals.md
  • предупреждение missing-ref ссылка на отсутствующий файл: references/observability.md
  • предупреждение missing-ref ссылка на отсутствующий файл: references/cost.md

Процессный рейтинг: все десять параметров 58/100

Не запустится. Скилл ссылается на файлы, которых нет в архиве: references/evals.md, references/observability.md, references/cost.md
  • 0Инструменты и файлы. Не хватает 3 файла(ов): references/evals.md, references/observability.md, references/cost.md
  • 0Ошибки и развилки. Линейный процесс без обработки сбоев
  • 0Отчётность по ходу. Скилл ничего не сообщает по ходу работы
  • 30Повторный запуск. Изменяющих операций: 1, без проверки текущего состояния
  • 60Результат и критерий готовности. Формат результата описан, критерия завершения нет
  • 70Входы и предусловия. Входные данные и предусловия перечислены
  • 100Шаги. Шагов: 19
  • 100Когда включается. Сказано, когда применять и когда не применять
  • 100Согласованность. Имя и обязательные поля на месте
  • 100Стоимость исполнения. Тело инструкции 693 токенов

Всё перечисленное измерено по тексту скилла, а не оценено моделью: цифры проверяемы. Вес параметра тем больше, чем чаще из-за него процесс встаёт.

Сигналы качества

  • +4Нет примеров входа/выхода
  • +1Лицензия не указана
  • +2Инструкции на одном языке
  • +5В description 21 примера фраз-триггеров в кавычках
  • +4Описание говорит, когда скилл НЕ применять
  • +3Длина description 688 символов: достаточно сигнала, не съедает бюджет
  • +4Структура: 11 заголовков
  • +3Пошаговые инструкции: 19 пунктов
  • +3Формат ответа описан явно

База качества 70; замечания lint вычитаются, сигналы прибавляют до 100. Итог: 80.