llm_completion
44 / 100曇り
- 目的
- 17 / 20
- 使いどころ
- 0 / 20
- 引数
- 20 / 25
- 戻り値
- 7 / 15
- 制約と副作用
- 0 / 10
- 例
- 0 / 10
- 要対応いつ使うか、いつ使わないかが書かれていません。
no_usage_context - 軽微制約も例もない文字列の引数: sistema
loose_string_param - 軽微制約・副作用・認証・回数制限の記述がなく、annotations もありません。
no_constraints
https://flat-rate-llm.kikoribera03.workers.dev/mcpv2載せているのは点数、指摘、名前だけです
このページには、dev.workers.kikoribera03.flat-rate-llm/x402-tools のツールの説明文の点数と指摘、ツールと引数の名前を載せています。説明文はサーバーのものなので、出どころのページでお読みください。
このサーバーが公式の MCP Registry に載せている URL に、上の日に 1 度だけ接続して tools/list を取りました(ツールは呼んでいません)。その後、サーバーが変わっているかもしれません。
too_many_tools| ツール | ツール | 説明の類似度 | 名前の類似度 |
|---|---|---|---|
| ai_image | ai_image_styled | 0.49 | 0.67 |
| evm_gas | evm_estimate_gas | 0.48 | 0.67 |
| ai_image | ai_image_edit | 0.36 | 0.67 |
44 / 100曇り
no_usage_contextloose_string_paramno_constraints50 / 100曇り
no_return_infono_constraints55 / 100曇り
no_return_infono_constraints55 / 100曇り
no_return_infono_constraints55 / 100曇り
no_return_infono_constraints55 / 100曇り
no_return_infono_constraints55 / 100曇り
no_return_infono_constraints55 / 100曇り
no_return_infono_constraints55 / 100曇り
no_return_infono_constraints55 / 100曇り
no_return_infono_constraints57 / 100曇り
confusable_pairconfusable_pairno_constraints57 / 100曇り
no_constraints57 / 100曇り
no_constraints58 / 100曇り
loose_string_paramno_return_info58 / 100曇り
no_return_info58 / 100曇り
no_return_info60 / 100曇り
no_return_infono_constraints60 / 100曇り
no_usage_context60 / 100曇り
no_return_infono_constraints60 / 100曇り
loose_string_paramno_return_infono_constraints60 / 100曇り
loose_string_paramno_return_infono_constraints60 / 100曇り
loose_string_paramno_return_infono_constraintsid_source_missing60 / 100曇り
loose_string_paramno_return_infono_constraints60 / 100曇り
loose_string_paramno_return_infono_constraints60 / 100曇り
loose_string_paramno_return_infono_constraints60 / 100曇り
no_return_infono_constraints60 / 100曇り
params_not_in_descriptionno_return_infono_constraints60 / 100曇り
no_return_infono_constraints60 / 100曇り
no_return_infono_constraints60 / 100曇り
no_return_infono_constraints60 / 100曇り
no_return_infono_constraints60 / 100曇り
no_return_infono_constraints60 / 100曇り
params_not_in_descriptionno_return_infono_constraints60 / 100曇り
no_return_infono_constraints60 / 100曇り
no_return_infono_constraints60 / 100曇り
no_return_infono_constraints60 / 100曇り
no_return_infono_constraints62 / 100曇り
confusable_pairno_constraints62 / 100曇り
confusable_pairno_constraints62 / 100曇り
no_constraints62 / 100曇り
no_constraints62 / 100曇り
no_constraints62 / 100曇り
no_constraints62 / 100曇り
no_constraints62 / 100曇り
no_constraints62 / 100曇り
generic_nameno_constraints62 / 100曇り
no_constraints62 / 100曇り
no_constraints63 / 100曇り
no_return_info63 / 100曇り
no_return_info63 / 100曇り
no_return_info63 / 100曇り
confusable_pairloose_string_paramno_return_info63 / 100曇り
no_return_info63 / 100曇り
no_return_info63 / 100曇り
no_return_info65 / 100曇り
no_return_infono_constraints65 / 100曇り
loose_string_paramno_return_infono_constraints65 / 100曇り
no_return_infono_constraints65 / 100曇り
params_not_in_descriptionno_return_infono_constraints65 / 100曇り
no_return_infono_constraints67 / 100曇り
no_constraints67 / 100曇り
loose_string_paramno_constraints67 / 100曇り
no_constraints67 / 100曇り
no_constraints67 / 100曇り
no_constraints67 / 100曇り
no_constraints67 / 100曇り
no_constraints67 / 100曇り
no_constraints67 / 100曇り
params_not_in_descriptionno_constraints68 / 100曇り
no_return_info70 / 100晴れ
指摘はありません。
70 / 100晴れ
指摘はありません。
70 / 100晴れ
confusable_pair70 / 100晴れ
指摘はありません。
72 / 100晴れ
no_constraints72 / 100晴れ
no_constraints72 / 100晴れ
params_not_in_descriptionno_constraints75 / 100晴れ
loose_string_param77 / 100晴れ
no_constraintsこの点数は、説明文とスキーマの文字だけを読んで付けています。書かれているかどうかを示すもので、モデルがどう動くかではありません。browser_close のように、短くても名前で意味が明らかなツールは、実際にはモデルが正しく使えていても低く出ます。私たちの計測でも、名前とスキーマが違えば、いまのモデルは 1 行の説明文からでも 1 手で正しいツールを選びました。文字からは分からないこと(数手にわたる動き、書き足した一文が助けになるか誤らせるか)は、Pro と Team のプランの評価で測れます。
ご自身のサーバーの掲載をやめてほしい場合は、support@forecall.dev までご連絡ください。7 日以内に外します。
採点したサーバーの一覧