Skip to content

feat: LLM スキル品質チェック CI・全ワークフロー SHA ピン留め#11

Merged
yk-lab merged 1 commit intomainfrom
feat/llm-skill-check
Mar 20, 2026
Merged

feat: LLM スキル品質チェック CI・全ワークフロー SHA ピン留め#11
yk-lab merged 1 commit intomainfrom
feat/llm-skill-check

Conversation

@yk-lab
Copy link
Copy Markdown
Contributor

@yk-lab yk-lab commented Mar 20, 2026

Summary

  • skill-quality-check.yml を新規追加: pull_request_target + environment: llm-check ゲートで SKILL.md / references / agent 定義を LLM (Sonnet) で品質チェック
  • plugin-dev:skill-reviewer プラグインを読み込んでスキル評価精度を向上
  • 全ワークフローの actions/checkout を v6.0.2 に更新・SHA ピン留め
  • anthropics/claude-code-action を v1.0.75 で SHA ピン留め

要手動設定

  • GitHub repo Settings → Environments → llm-check を作成
  • Required reviewers を設定(承認ゲート)

チェック項目 (10 項目)

  1. description フォーマット(三人称)
  2. トリガーフレーズの多様性
  3. スキル間トリガー重複
  4. 内容の一貫性
  5. 網羅性
  6. Cross-skill ハンドオフ
  7. Agent description フォーマット
  8. Agent ツールカバレッジ
  9. references の関連性
  10. references の正確性

Test plan

  • llm-check environment を作成後、SKILL.md を変更する PR で発火することを確認
  • 承認ゲートが機能することを確認
  • レビュー結果が PR コメントに投稿されることを確認
  • validate / skills-install CI がパスすることを確認

Closes #1

🤖 Generated with Claude Code

- skill-quality-check.yml: pull_request_target + environment ゲートで
  SKILL.md / references / agent 定義の品質を LLM (Sonnet) でチェック
  plugin-dev:skill-reviewer を読み込んで評価精度を向上
- 全ワークフローの actions/checkout を v6.0.2 に更新・SHA ピン留め
- anthropics/claude-code-action を v1.0.75 で SHA ピン留め

Closes #1

Co-Authored-By: Claude Opus 4.6 (1M context) <noreply@anthropic.com>
@yk-lab yk-lab merged commit f52bcd9 into main Mar 20, 2026
2 of 3 checks passed
@yk-lab yk-lab deleted the feat/llm-skill-check branch March 20, 2026 16:25
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Labels

None yet

Projects

None yet

Development

Successfully merging this pull request may close these issues.

CI に LLM ベースのスキル品質チェックを追加

1 participant