SKILLEMALL.ai

AB idea-quality

Оценивает КАЧЕСТВО исследовательской идеи на стадии замысла — на основе файла Markdown с разделами «Название» / «Мотивация» / «Метод» (эксперименты не требуются) — выдает оценку качества по каждой оси с цитированием доказательств и общий балл от 0 до 100 плюс вердикт; или, на основе двух таких файлов идей, слепое сравнительное тестирование. Активируется, когда пользователь спрашивает «насколько хороша эта идея», «оцени / дай оценку / поставь оценку этой исследовательской идее или предложению», «просмотри мою идею .md перед тем, как я ее оформлю», «достаточно ли силен этот вклад, чтобы его развивать», «какой из этих двух файлов идей сильнее», или передает файл идеи Markdown (Название/Мотивация/Метод) и хочет получить оценку качества. Используйте это, даже если пользователь не произносит слово «оценка», но явно хочет оценить, насколько сильна идея. НЕ активируйте для проверки предыдущих работ / пересечений / «новизна по сравнению с существующими работами» (это задача проверки на столкновение с литературой), для полных обзоров готовых статей, которые уже содержат результаты, или для генерации самой идеи.

машинный переводПоказать оригиналСкрыть оригинал«Score the QUALITY of a research idea at the idea stage — given a Markd…»

Score the QUALITY of a research idea at the idea stage — given a Markdown file with Title / Motivation / Method sections (no experiments needed), produce a per-axis quality assessment with cited evidence and an overall 0–100 score plus a verdict; or, given two such idea files, a blind head-to-head comparison. TRIGGER when the user asks "how good is this idea", "rate / score / grade this research idea or proposal", "review my idea .md before I write it up", "is this contribution strong enough to pursue", "which of these two idea files is stronger", or hands over an idea Markdown file (Title/Motivation/Method) and wants a quality judgment. Use this even when the user does not say the word "score" but clearly wants an assessment of how strong an idea is. DO NOT trigger for prior-art / overlap / "is this novel vs existing work" checks (that is a literature-collision task), for full reviews of finished papers that already have results, or for generating the idea itself.

microsoft/ResearchStudio Agent Skills автор: microsoft 5 файлов тело ≈ 2 252 токенов Открыть источникgithub.com↗ проанализирован 5 дн назад

Оценивает КАЧЕСТВО исследовательской идеи на стадии замысла — на основе файла Markdown с разделами «Название» / «Мотивация» / «Метод» (эксперименты не…

Как процесс B 76/100 · Почти готов — слабые места: согласованность, отчётность по ходу

ГенераторДанные и аналитикатип и темы размечены автоматически по тексту скилла
JSON
Технический рейтинг
A
96/100
безопасность, качество, тесты
Безопасность 60%
100
Качество 40%
89
Прогон на моделях
не было
Процессный рейтинг
B
76/100
Почти готов
Отчётность по ходу вес 2
0
Согласованность вес 8
40
Инструменты и файлы вес 18
60
три самых слабых из десяти параметров · все десять

Как улучшить

    Для прогона на моделях — необязательно
    • spec.yaml с триггерными фразами и утверждениями — контракт поведения для CI; `skilltest init` создаст шаблон.

    Находки guard · 0

    ✓ Критических и высоких находок нет

    Просканировано файлов: 1. Улики замаскированы. Пометки в серых чипах объясняют, почему серьёзность понижена.

    По спецификации Agent Skills

    ✓ По спецификации Agent Skills замечаний нет

    Процессный рейтинг: все десять параметров 76/100

    • 0Отчётность по ходу. Скилл ничего не сообщает по ходу работы
    • 40Согласованность. Имя во frontmatter (idea-quality) не совпадает с папкой (idea_quality)
    • 60Инструменты и файлы. Используются инструменты (read), но во frontmatter они не объявлены
    • 65Ошибки и развилки. Развилок: 3
    • 70Когда включается. Сказано, когда применять, но не сказано, когда не стоит
    • 70Входы и предусловия. Входные данные и предусловия перечислены
    • 100Шаги. Шагов: 21
    • 100Результат и критерий готовности. Формат результата и критерий готовности описаны
    • 100Стоимость исполнения. Тело инструкции 2252 токенов
    • 100Повторный запуск. Изменяющих операций нет
    • low Среди тестов нет случая на инъекцию через данные

    Всё перечисленное измерено по тексту скилла, а не оценено моделью: цифры проверяемы. Вес параметра тем больше, чем чаще из-за него процесс встаёт.

    Сигналы качества

    • +4Описание не говорит, когда скилл НЕ применять (ложные срабатывания)
    • +3Длина description 979: рекомендуется 120–800 символов
    • +1Лицензия не указана
    • +2Инструкции на одном языке
    • +5В description 6 примера фраз-триггеров в кавычках
    • +4Структура: 9 заголовков
    • +3Пошаговые инструкции: 21 пунктов
    • +3Формат ответа описан явно
    • +4Есть примеры (4 блоков кода)

    База качества 70; замечания lint вычитаются, сигналы прибавляют до 100. Итог: 89.