health
57 / 100曇り
- 目的
- 17 / 20
- 使いどころ
- 0 / 20
- 引数
- 25 / 25
- 戻り値
- 7 / 15
- 制約と副作用
- 3 / 10
- 例
- 5 / 10
- 要対応いつ使うか、いつ使わないかが書かれていません。
no_usage_context
https://api.arcgate.dev/mcpv2載せているのは点数、指摘、名前だけです
このページには、arcgate (dev.arcgate/arcgate) のツールの説明文の点数と指摘、ツールと引数の名前を載せています。説明文はサーバーのものなので、出どころのページでお読みください。
このサーバーが公式の MCP Registry に載せている URL に、上の日に 1 度だけ接続して tools/list を取りました(ツールは呼んでいません)。その後、サーバーが変わっているかもしれません。
too_many_toolsconfusable_pair_totalinstructions_missing| ツール | ツール | 説明の類似度 | 名前の類似度 |
|---|---|---|---|
| webhookDelete | telegramDelete | 0.89 | 0.33 |
| inboundDelete | watchDelete | 0.81 | 0.33 |
| watchDelete | webhookDelete | 0.80 | 0.33 |
| watchDelete | telegramDelete | 0.80 | 0.33 |
| inboundDelete | webhookDelete | 0.77 | 0.33 |
| inboundDelete | telegramDelete | 0.77 | 0.33 |
| boxMessageFetch | boxMessageDelete | 0.76 | 0.50 |
| inboundRotate | webhookRotate | 0.74 | 0.33 |
| webhookList | telegramList | 0.72 | 0.33 |
| boxCreate | boxTopUp | 0.67 | 0.25 |
| inboundList | watchList | 0.67 | 0.33 |
| webhookCreate | telegramCreate | 0.66 | 0.33 |
57 / 100曇り
no_usage_context57 / 100曇り
param_no_descriptionid_source_missing57 / 100曇り
no_usage_context62 / 100曇り
no_usage_contextdestructive_unmarked62 / 100曇り
no_usage_context65 / 100曇り
param_no_description67 / 100曇り
指摘はありません。
67 / 100曇り
id_source_missing67 / 100曇り
id_source_missing67 / 100曇り
destructive_unmarkedid_source_missing67 / 100曇り
指摘はありません。
67 / 100曇り
指摘はありません。
67 / 100曇り
destructive_unmarked67 / 100曇り
confusable_pairid_source_missing67 / 100曇り
destructive_unmarked67 / 100曇り
destructive_unmarkedid_source_missing67 / 100曇り
id_source_missing67 / 100曇り
指摘はありません。
67 / 100曇り
id_source_missing67 / 100曇り
id_source_missing67 / 100曇り
id_source_missing67 / 100曇り
confusable_pairid_source_missing72 / 100晴れ
指摘はありません。
72 / 100晴れ
指摘はありません。
72 / 100晴れ
指摘はありません。
72 / 100晴れ
指摘はありません。
72 / 100晴れ
destructive_unmarkedconfusable_pair72 / 100晴れ
destructive_unmarkedconfusable_pair72 / 100晴れ
confusable_pair72 / 100晴れ
destructive_unmarkedconfusable_pairconfusable_pairconfusable_pairid_source_missing72 / 100晴れ
destructive_unmarkedconfusable_pair72 / 100晴れ
destructive_unmarkedconfusable_pair72 / 100晴れ
destructive_unmarkedconfusable_pairconfusable_pairconfusable_pairid_source_missing72 / 100晴れ
confusable_pair72 / 100晴れ
destructive_unmarkedconfusable_pairconfusable_pairconfusable_pairid_source_missing72 / 100晴れ
destructive_unmarkedconfusable_pair72 / 100晴れ
destructive_unmarkedconfusable_pair72 / 100晴れ
destructive_unmarkedconfusable_pairconfusable_pairconfusable_pairid_source_missing72 / 100晴れ
confusable_pair77 / 100晴れ
指摘はありません。
77 / 100晴れ
id_source_missing77 / 100晴れ
confusable_pair77 / 100晴れ
destructive_unmarked77 / 100晴れ
too_long77 / 100晴れ
指摘はありません。
77 / 100晴れ
too_long77 / 100晴れ
too_longid_source_missing77 / 100晴れ
destructive_unmarkedtoo_longこの点数は、説明文とスキーマの文字だけを読んで付けています。書かれているかどうかを示すもので、モデルがどう動くかではありません。browser_close のように、短くても名前で意味が明らかなツールは、実際にはモデルが正しく使えていても低く出ます。私たちの計測でも、名前とスキーマが違えば、いまのモデルは 1 行の説明文からでも 1 手で正しいツールを選びました。文字からは分からないこと(数手にわたる動き、書き足した一文が助けになるか誤らせるか)は、Pro と Team のプランの評価で測れます。
ご自身のサーバーの掲載をやめてほしい場合は、support@forecall.dev までご連絡ください。7 日以内に外します。
採点したサーバーの一覧