chat_send
47 / 100曇り
- 目的
- 17 / 20
- 使いどころ
- 5 / 20
- 引数
- 18 / 25
- 戻り値
- 0 / 15
- 制約と副作用
- 7 / 10
- 例
- 0 / 10
- 軽微何が返るかが書かれていません。
no_return_info - 軽微必須の id 系の引数に、値をどこから得るかが書かれていません: sender_id。返してくれるツールや場所を書かないと、モデルは先に探しにいきます。
id_source_missing
https://starsphera.com/mcpv2載せているのは点数、指摘、名前だけです
このページには、io.github.dtajitdinov-aris/sphere-marketplace のツールの説明文の点数と指摘、ツールと引数の名前を載せています。説明文はサーバーのものなので、出どころのページでお読みください。
このサーバーが公式の MCP Registry に載せている URL に、上の日に 1 度だけ接続して tools/list を取りました(ツールは呼んでいません)。その後、サーバーが変わっているかもしれません。
many_toolsconfusable_pair_totalinstructions_long| ツール | ツール | 説明の類似度 | 名前の類似度 |
|---|---|---|---|
| buy_csv_clean_research_brief | buy_agent_exec_placement | 0.90 | 0.12 |
| buy_backtest_score_certificate_for_prediction_tickets | buy_csv_clean_research_brief | 0.89 | 0.09 |
| buy_backtest_score_certificate_for_prediction_tickets | buy_agent_exec_placement | 0.89 | 0.10 |
| buy_agent_exec | buy_agent_exec_placement | 0.88 | 0.75 |
| buy_agent_exec_placement | buy_ai_writing_research | 0.88 | 0.14 |
| buy_csv_clean_research_brief | buy_agent_exec | 0.85 | 0.14 |
| buy_csv_clean_research_brief | buy_ai_writing_research | 0.85 | 0.29 |
| buy_backtest_score_certificate_for_prediction_tickets | buy_agent_exec | 0.84 | 0.11 |
| buy_backtest_score_certificate_for_prediction_tickets | buy_ai_writing_research | 0.84 | 0.10 |
| buy_agent_exec | buy_ai_writing_research | 0.83 | 0.17 |
| buy_sphere_receipt | buy_verify_claims_smart | 0.72 | 0.17 |
| buy_sphere_receipt | buy_agent_exec_placement | 0.65 | 0.17 |
47 / 100曇り
no_return_infoid_source_missing47 / 100曇り
no_return_info49 / 100曇り
no_usage_contextloose_string_paramno_return_info49 / 100曇り
no_usage_context50 / 100曇り
no_return_info50 / 100曇り
no_return_info52 / 100曇り
no_return_infoid_source_missing52 / 100曇り
no_return_info52 / 100曇り
no_usage_contextid_source_missing53 / 100曇り
no_usage_context53 / 100曇り
no_usage_contextparams_not_in_description54 / 100曇り
id_source_missing55 / 100曇り
no_return_info55 / 100曇り
params_not_in_descriptionno_return_info57 / 100曇り
no_return_info58 / 100曇り
no_return_info59 / 100曇り
指摘はありません。
59 / 100曇り
id_source_missing59 / 100曇り
指摘はありません。
61 / 100曇り
no_requiredparams_not_in_description62 / 100曇り
id_source_missing63 / 100曇り
no_return_infoid_source_missing65 / 100曇り
no_usage_context69 / 100曇り
confusable_pairconfusable_pairconfusable_pairconfusable_pair69 / 100曇り
confusable_pairconfusable_pairconfusable_pairconfusable_pairconfusable_pair69 / 100曇り
confusable_pairconfusable_pairconfusable_pairconfusable_pair69 / 100曇り
confusable_pairconfusable_pairconfusable_pairconfusable_pairlong_name69 / 100曇り
confusable_pairconfusable_pairconfusable_pairconfusable_pair77 / 100晴れ
confusable_pairconfusable_pair77 / 100晴れ
confusable_pairこの点数は、説明文とスキーマの文字だけを読んで付けています。書かれているかどうかを示すもので、モデルがどう動くかではありません。browser_close のように、短くても名前で意味が明らかなツールは、実際にはモデルが正しく使えていても低く出ます。私たちの計測でも、名前とスキーマが違えば、いまのモデルは 1 行の説明文からでも 1 手で正しいツールを選びました。文字からは分からないこと(数手にわたる動き、書き足した一文が助けになるか誤らせるか)は、Pro と Team のプランの評価で測れます。
ご自身のサーバーの掲載をやめてほしい場合は、support@forecall.dev までご連絡ください。7 日以内に外します。
採点したサーバーの一覧