delete_rate_alert
55 / 100曇り
- 目的
- 17 / 20
- 使いどころ
- 0 / 20
- 引数
- 23 / 25
- 戻り値
- 8 / 15
- 制約と副作用
- 7 / 10
- 例
- 0 / 10
- 要対応いつ使うか、いつ使わないかが書かれていません。
no_usage_context - 軽微必須の id 系の引数に、値をどこから得るかが書かれていません: alert_id。返してくれるツールや場所を書かないと、モデルは先に探しにいきます。
id_source_missing
https://mcp.gondola.ai/mcpv2載せているのは点数、指摘、名前だけです
このページには、Gondola Award Travel Search (ai.gondola/gondola) のツールの説明文の点数と指摘、ツールと引数の名前を載せています。説明文はサーバーのものなので、出どころのページでお読みください。
このサーバーが公式の MCP Registry に載せている URL に、上の日に 1 度だけ接続して tools/list を取りました(ツールは呼んでいません)。その後、サーバーが変わっているかもしれません。
too_many_toolsinstructions_long| ツール | ツール | 説明の類似度 | 名前の類似度 |
|---|---|---|---|
| compare_rates | compare_rates_v2 | 0.92 | 0.67 |
| get_hotel_details | get_hotel_details_v2 | 0.91 | 0.75 |
| book_hotel | book_hotel_v2 | 0.76 | 0.67 |
| get_booking_link | get_vehicle_booking_link | 0.39 | 0.75 |
55 / 100曇り
no_usage_contextid_source_missing58 / 100曇り
params_not_in_description58 / 100曇り
no_usage_context58 / 100曇り
id_source_missing60 / 100曇り
id_source_missing63 / 100曇り
confusable_pair63 / 100曇り
params_not_in_descriptionid_source_missing64 / 100曇り
no_usage_context65 / 100曇り
no_usage_contextconfusable_pairid_source_missing65 / 100曇り
no_usage_contextconfusable_pairid_source_missing66 / 100曇り
指摘はありません。
67 / 100曇り
指摘はありません。
67 / 100曇り
no_usage_context67 / 100曇り
no_usage_context67 / 100曇り
no_usage_context67 / 100曇り
指摘はありません。
68 / 100曇り
id_source_missing70 / 100晴れ
confusable_pair70 / 100晴れ
指摘はありません。
70 / 100晴れ
confusable_pairid_source_missing70 / 100晴れ
id_source_missing70 / 100晴れ
指摘はありません。
70 / 100晴れ
指摘はありません。
70 / 100晴れ
params_not_in_description71 / 100晴れ
no_usage_context74 / 100晴れ
id_source_missing75 / 100晴れ
id_source_missing75 / 100晴れ
指摘はありません。
75 / 100晴れ
指摘はありません。
75 / 100晴れ
指摘はありません。
75 / 100晴れ
params_not_in_descriptionid_source_missing75 / 100晴れ
指摘はありません。
75 / 100晴れ
id_source_missing75 / 100晴れ
confusable_pairparams_not_in_description76 / 100晴れ
confusable_pair77 / 100晴れ
指摘はありません。
77 / 100晴れ
指摘はありません。
78 / 100晴れ
loose_string_param78 / 100晴れ
param_no_description80 / 100晴れ
id_source_missing80 / 100晴れ
params_not_in_descriptionid_source_missing83 / 100晴れ
confusable_pair85 / 100晴れ
指摘はありません。
87 / 100晴れ
params_not_in_descriptionid_source_missing87 / 100晴れ
param_no_description90 / 100晴れ
指摘はありません。
90 / 100晴れ
指摘はありません。
90 / 100晴れ
指摘はありません。
93 / 100晴れ
指摘はありません。
この点数は、説明文とスキーマの文字だけを読んで付けています。書かれているかどうかを示すもので、モデルがどう動くかではありません。browser_close のように、短くても名前で意味が明らかなツールは、実際にはモデルが正しく使えていても低く出ます。私たちの計測でも、名前とスキーマが違えば、いまのモデルは 1 行の説明文からでも 1 手で正しいツールを選びました。文字からは分からないこと(数手にわたる動き、書き足した一文が助けになるか誤らせるか)は、Pro と Team のプランの評価で測れます。
ご自身のサーバーの掲載をやめてほしい場合は、support@forecall.dev までご連絡ください。7 日以内に外します。
採点したサーバーの一覧