SKILLEMALL.ai

BC skill-injection-defense

Проверяет юридические ИИ-навыки, промпты, рабочие процессы, инструкции MCP/инструменты и пакеты агентов на предмет внедрения промптов, вредоносных инструкций, небезопасных скриптов, подозрительных метаданных, раскрытия учетных данных, путей эксфильтрации, механизмов персистентности и рисков цепочки поставок. Используйте перед установкой, импортом, публикацией, продвижением, изменением или доверием сторонним или сгенерированным ИИ-навыкам и юридическим рабочим процессам. Не используйте как универсальный обзор кода, если в области рассмотрения не входят доверие к навыку, безопасность рабочего процесса, внедрение промптов или гигиена цепочки поставок.

машинный переводПоказать оригиналСкрыть оригинал«Audits legal AI skills, prompts, workflows, MCP/tool instructions, and…»

Audits legal AI skills, prompts, workflows, MCP/tool instructions, and agent packages for prompt injection, malicious instructions, unsafe scripts, suspicious metadata, credential exposure, exfiltration paths, persistence mechanisms, and supply-chain risk. Use before installing, importing, publishing, promoting, modifying, or trusting third-party or generated AI skills and legal workflows. Do not use as a generic code review unless skill trust, workflow safety, prompt injection, or supply-chain hygiene is in scope.

lawve-ai/awesome-legal-skills Agent Skills автор: lawve-ai 2 файла тело ≈ 986 токенов Открыть источникgithub.com↗ проанализирован 57 мин назад

Проверяет юридические ИИ-навыки, промпты, рабочие процессы, инструкции MCP/инструменты и пакеты агентов на предмет внедрения промптов, вредоносных инструкций…

Как процесс C 57/100 · Есть пробелы — слабые места: входы и предусловия, ошибки и развилки, согласованность

ПроцедураИИ и агентытип и темы размечены автоматически по тексту скилла
JSON
Технический рейтинг
B
94/100
безопасность, качество, тесты
Безопасность 60%
98
Качество 40%
87
Прогон на моделях
не было
Процессный рейтинг
C
57/100
Есть пробелы
Входы и предусловия вес 11
0
Ошибки и развилки вес 10
0
Отчётность по ходу вес 2
0
три самых слабых из десяти параметров · все десять

Как улучшить

    Для прогона на моделях — необязательно
    • Свои кейсы (evals/evals.json, 4–6 реальных запросов с ожидаемыми ответами): тогда полная проверка прогонит именно их, а не черновик от модели.
    • spec.yaml с триггерными фразами и утверждениями — контракт поведения для CI; `skilltest init` создаст шаблон.

    Находки guard · 2

    ✓ Критических и высоких находок нет

    Средние и низкие: 2
    • низкая Рискованное назначение intent-offensive-security SKILL.md:43
      Наступательная безопасность / двойное назначение (допустимо для авторизованного тестирования; проверьте назначение)
      - credential harvesting or environment-variable access;
    • низкая Рискованное назначение intent-offensive-security SKILL.md:46
      Наступательная безопасность / двойное назначение (допустимо для авторизованного тестирования; проверьте назначение)
      - destructive actions such as deletion, overwrite, privilege escalation, or broad filesystem mutation;

    Просканировано файлов: 2. Улики замаскированы. Пометки в серых чипах объясняют, почему серьёзность понижена.

    По спецификации Agent Skills

    ✓ По спецификации Agent Skills замечаний нет

    Процессный рейтинг: все десять параметров 57/100

    • 0Входы и предусловия. Не сказано, что нужно иметь на входе
    • 0Ошибки и развилки. Линейный процесс без обработки сбоев
    • 0Отчётность по ходу. Скилл ничего не сообщает по ходу работы
    • 30Повторный запуск. Изменяющих операций: 6, без проверки текущего состояния
    • 40Согласованность. Имя во frontmatter (skill-injection-defense) не совпадает с папкой (skill-injection-defense-adrian-lerer)
    • 60Инструменты и файлы. Используются инструменты (bash), но во frontmatter они не объявлены
    • 60Результат и критерий готовности. Формат результата описан, критерия завершения нет
    • 100Шаги. Шагов: 69
    • 100Когда включается. Сказано, когда применять и когда не применять
    • 100Стоимость исполнения. Тело инструкции 986 токенов

    Всё перечисленное измерено по тексту скилла, а не оценено моделью: цифры проверяемы. Вес параметра тем больше, чем чаще из-за него процесс встаёт.

    Сигналы качества

    • +5В description нет примеров фраз, по которым скилл должен срабатывать
    • +4Нет примеров входа/выхода
    • +1Лицензия не указана
    • +2Инструкции на одном языке
    • +4Описание говорит, когда скилл НЕ применять
    • +3Длина description 520 символов: достаточно сигнала, не съедает бюджет
    • +4Структура: 7 заголовков
    • +3Пошаговые инструкции: 69 пунктов
    • +3Формат ответа описан явно

    База качества 70; замечания lint вычитаются, сигналы прибавляют до 100. Итог: 87.