BD evaluator
Оценка качества отрендеренных mp4 UGC — сегментация сцен, громкость звука / тишина, плотность субтитров и визуальный анализ по сценам. Создает действенный отчет (eval.json + eval-report.md), предназначенный для последующего агента-исправника. ИСПОЛЬЗОВАТЬ КОГДА пользователь просит «оценить / выставить балл / проверить качество» отрендеренного видео, спрашивает «хорошее ли это видео?», загружает путь к mp4 без других инструкций, упоминает «найти проблемы / дефекты», просит оценить удержание или остановку прокрутки, или только что отрендерил что-то и хочет проверить перед публикацией. ТРИГГЕР (EN): "evaluate this video", "score the render", "grade the mp4", "review the final cut", "QA this video", "is this ready to ship", "what's wrong with this video", "find issues in <path.mp4>", "audit the video", "scene-by-scene breakdown", "retention check", "quality gate". См. тело для ТАКЖЕ ЗАПУСКАТЬ / НЕ ЗАПУСКАТЬ / ЖЕСТКИЕ ИНВАРИАНТЫ.
машинный переводПоказать оригиналСкрыть оригинал«Quality evaluation of rendered UGC mp4s — scene segmentation, audio lo…»
Quality evaluation of rendered UGC mp4s — scene segmentation, audio loudness / dead-air, caption density, and per-scene visual analysis. Produces an actionable report (eval.json + eval-report.md) sized for a downstream fixer agent. USE WHEN the user asks to "evaluate / score / grade / review / QA / check quality of" a rendered video, asks "is this video good?", drops an mp4 path with no other instruction, mentions "find issues / problems / artifacts", asks for retention or scroll-stop assessment, or has just rendered something and wants verification before publishing. TRIGGER (EN): "evaluate this video", "score the render", "grade the mp4", "review the final cut", "QA this video", "is this ready to ship", "what's wrong with this video", "find issues in <path.mp4>", "audit the video", "scene-by-scene breakdown", "retention check", "quality gate". See body for ALSO FIRE / DO NOT FIRE / HARD INVARIANTS.
Оценка качества отрендеренных mp4 UGC — сегментация сцен, громкость звука / тишина, плотность субтитров и визуальный анализ по сценам.
Как процесс D 45/100 · Процесс не доведён — Скилл ссылается на файлы, которых нет в архиве: ../../../docs/playbooks/unit-lifecycle.md, ../scenarist/references/retention-review.md, ../../../docs/research/gate-audit-2026-10.md
Как улучшить
- В тексте есть ссылки на отсутствующие файлы: добавьте файлы или уберите ссылки.
- Свои кейсы (evals/evals.json, 4–6 реальных запросов с ожидаемыми ответами): тогда полная проверка прогонит именно их, а не черновик от модели.
- spec.yaml с триггерными фразами и утверждениями — контракт поведения для CI; `skilltest init` создаст шаблон.
Находки guard · 0
✓ Критических и высоких находок нет
Просканировано файлов: 4. Улики замаскированы. Пометки в серых чипах объясняют, почему серьёзность понижена.
По спецификации Agent Skills
- предупреждение
missing-refссылка на отсутствующий файл: ../../../docs/playbooks/unit-lifecycle.md - предупреждение
missing-refссылка на отсутствующий файл: ../scenarist/references/retention-review.md - предупреждение
missing-refссылка на отсутствующий файл: ../../../docs/research/gate-audit-2026-10.md - заметка
frontmatter-keyнеизвестное поле фронтматтера "namespace" - заметка
edit-residueв тексте есть пометки об устаревшем (строки 34, 56, 96, 97): проверьте, не остались ли старые правила рядом с новыми — полная проверка читает текст на противоречия
Процессный рейтинг: все десять параметров 45/100
- 0Инструменты и файлы. Не хватает 3 файла(ов): ../../../docs/playbooks/unit-lifecycle.md, ../scenarist/references/retention-review.md, ../../../docs/research/gate-audit-2026-10.md
- 0Результат и критерий готовности. Не сказано, что считать результатом
- 0Входы и предусловия. Не сказано, что нужно иметь на входе
- 0Отчётность по ходу. Скилл ничего не сообщает по ходу работы
- 30Повторный запуск. Изменяющих операций: 13, без проверки текущего состояния
- 70Когда включается. Сказано, когда применять, но не сказано, когда не стоит
- 70Стоимость исполнения. Тело инструкции 4291 токенов
- 85Шаги. Шагов: 62, расплывчатых формулировок: 1
- 100Ошибки и развилки. Развилок: 3, есть раздел про ошибки
- 100Согласованность. Имя и обязательные поля на месте
- medium Правила безопасности и запреты внутри скилла: их место в системном промпте, здесь они не защищают
- low Разделов верхнего уровня: 12. Похоже на несколько доменов в одном скилле
- low Ответ описан самодельной разметкой (7 тегов): типизированный вызов надёжнее
Всё перечисленное измерено по тексту скилла, а не оценено моделью: цифры проверяемы. Вес параметра тем больше, чем чаще из-за него процесс встаёт.
Сигналы качества
- +4Описание не говорит, когда скилл НЕ применять (ложные срабатывания)
- +3Длина description 913: рекомендуется 120–800 символов
- +3Формат ответа не описан: модель каждый раз решает сама
- +1Лицензия не указана
- +2Инструкции на одном языке
- +5В description 15 примера фраз-триггеров в кавычках
- +4Структура: 16 заголовков
- +3Пошаговые инструкции: 62 пунктов
- +4Есть примеры (3 блоков кода)
- +4Справочные файлы упоминаются в инструкциях (3 из 3)
База качества 70; замечания lint вычитаются, сигналы прибавляют до 100. Итог: 77.