DZone.com Feed 日本語
フォロー
Anthropic Evaluation Tool を使用した Claude Code Plugin の効率性チェック
Claude Code スキルは、タスクがその説明と一致した場合にアシスタントがロードする Markdown ドキュメントです。スキル、エージェント、フックのコレクションはプラグインとしてパッケージ化され、マーケットプレイスを通じて配布できます。2026年の夏以来、私の開発環境は、Java の作業のためにそのようなプラグインに依存しており、Spring Boot、Quarkus、Apache Camel、および Jakarta EE のエージェントとスキルのセットで構成されています。このコレクションは少数のアーティファクトから始まりましたが、少しずつ拡張していき、数ヶ月後には 43 個のファイルと 17,338 行を含むようになりました。これにより、次のような正確な疑問が生じました。このプラグインによって提供されるスタックの規約は、最終的な成果に測定可能な貢献を本当にしていたのか、それともモデルは、その固有の一般的な知識によって、はるかに少ないトークンで同じ結果を推測できたのか?