採点したサーバーの一覧

ScoreIA Open Chamber: ツールの説明文の採点結果 ai.scoreia/bench

tools/list の取得日
(UTC)
接続した URL
https://scoreia.ai/mcp
採点の規則
v2
掲載の取り下げ
support@forecall.dev
この URL のいまの状態を採点する

載せているのは点数、指摘、名前だけです

このページには、ScoreIA Open Chamber (ai.scoreia/bench) のツールの説明文の点数と指摘、ツールと引数の名前を載せています。説明文はサーバーのものなので、出どころのページでお読みください。

このサーバーが公式の MCP Registry に載せている URL に、上の日に 1 度だけ接続して tools/list を取りました(ツールは呼んでいません)。その後、サーバーが変わっているかもしれません。

servers/ai.scoreia/bench
平均点
28.6 / 100雨
ツールの数
18
説明がほぼ同じ組
3

サーバー全体

説明文がほぼ同じツールの組

3 組のうち 3 組を、説明の類似度が高い順に表示しています。
ツールツール説明の類似度名前の類似度
enter_open_challengestart_challenge0.940.25
chamber_actionchallenge_action0.880.33
seal_attemptfinish_challenge0.730.00

ツール

fetch

10 / 100雨

目的
10 / 20
使いどころ
0 / 20
引数
0 / 25
戻り値
0 / 15
制約と副作用
0 / 10
例
0 / 10
  • 要対応
    いつ使うか、いつ使わないかが書かれていません。no_usage_context
  • 要対応
    説明のない引数: id、card_idparam_no_description
  • 軽微
    制約も例もない文字列の引数: id、card_idloose_string_param
  • 軽微
    `required` が指定されていないため、すべての引数が任意になっています。no_required
  • 軽微
    何が返るかが書かれていません。no_return_info
  • 軽微
    制約・副作用・認証・回数制限の記述がなく、annotations もありません。no_constraints

read_card

16 / 100雨

目的
13 / 20
使いどころ
0 / 20
引数
3 / 25
戻り値
0 / 15
制約と副作用
0 / 10
例
0 / 10
  • 要対応
    いつ使うか、いつ使わないかが書かれていません。no_usage_context
  • 要対応
    説明のない引数: card_idparam_no_description
  • 軽微
    制約も例もない文字列の引数: card_idloose_string_param
  • 軽微
    何が返るかが書かれていません。no_return_info
  • 軽微
    制約・副作用・認証・回数制限の記述がなく、annotations もありません。no_constraints
  • 軽微
    必須の id 系の引数に、値をどこから得るかが書かれていません: card_id。返してくれるツールや場所を書かないと、モデルは先に探しにいきます。id_source_missing

seal_attempt

18 / 100雨

目的
13 / 20
使いどころ
0 / 20
引数
5 / 25
戻り値
0 / 15
制約と副作用
0 / 10
例
0 / 10
  • 要対応
    いつ使うか、いつ使わないかが書かれていません。no_usage_context
  • 要対応
    説明のない引数: challenge_handle、next_candidate、exportparam_no_description
  • 軽微
    finish_challenge と説明文がほぼ同じです(類似度 0.73)。違いは名前とスキーマにしかありません。この説明文に、finish_challenge を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    制約も例もない文字列の引数: challenge_handle、next_candidateloose_string_param
  • 軽微
    引数が 3 つ以上あるのに、説明文がどの引数にも触れていません。params_not_in_description
  • 軽微
    真偽値の引数 export の意味が分かりにくくなっています。vague_boolean
  • 軽微
    何が返るかが書かれていません。no_return_info
  • 軽微
    制約・副作用・認証・回数制限の記述がなく、annotations もありません。no_constraints

finish_challenge

19 / 100雨

目的
14 / 20
使いどころ
0 / 20
引数
5 / 25
戻り値
0 / 15
制約と副作用
0 / 10
例
0 / 10
  • 要対応
    いつ使うか、いつ使わないかが書かれていません。no_usage_context
  • 要対応
    説明のない引数: challenge_handle、next_candidate、exportparam_no_description
  • 軽微
    seal_attempt と説明文がほぼ同じです(類似度 0.73)。違いは名前とスキーマにしかありません。この説明文に、seal_attempt を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    制約も例もない文字列の引数: challenge_handle、next_candidateloose_string_param
  • 軽微
    引数が 3 つ以上あるのに、説明文がどの引数にも触れていません。params_not_in_description
  • 軽微
    真偽値の引数 export の意味が分かりにくくなっています。vague_boolean
  • 軽微
    何が返るかが書かれていません。no_return_info
  • 軽微
    制約・副作用・認証・回数制限の記述がなく、annotations もありません。no_constraints

read_suite

20 / 100雨

目的
17 / 20
使いどころ
0 / 20
引数
3 / 25
戻り値
0 / 15
制約と副作用
0 / 10
例
0 / 10
  • 要対応
    いつ使うか、いつ使わないかが書かれていません。no_usage_context
  • 要対応
    説明のない引数: suiteparam_no_description
  • 軽微
    制約も例もない文字列の引数: suiteloose_string_param
  • 軽微
    何が返るかが書かれていません。no_return_info
  • 軽微
    制約・副作用・認証・回数制限の記述がなく、annotations もありません。no_constraints

search

20 / 100雨

目的
10 / 20
使いどころ
0 / 20
引数
7 / 25
戻り値
0 / 15
制約と副作用
3 / 10
例
0 / 10
  • 要対応
    いつ使うか、いつ使わないかが書かれていません。no_usage_context
  • 要対応
    説明のない引数: query、suite、product、domain、card_id、limit、offsetparam_no_description
  • 軽微
    `required` が指定されていないため、すべての引数が任意になっています。no_required
  • 軽微
    引数が 3 つ以上あるのに、説明文がどの引数にも触れていません。params_not_in_description
  • 軽微
    何が返るかが書かれていません。no_return_info

verify_card

20 / 100雨

目的
17 / 20
使いどころ
0 / 20
引数
3 / 25
戻り値
0 / 15
制約と副作用
0 / 10
例
0 / 10
  • 要対応
    いつ使うか、いつ使わないかが書かれていません。no_usage_context
  • 要対応
    説明のない引数: card_idparam_no_description
  • 軽微
    制約も例もない文字列の引数: card_idloose_string_param
  • 軽微
    何が返るかが書かれていません。no_return_info
  • 軽微
    制約・副作用・認証・回数制限の記述がなく、annotations もありません。no_constraints
  • 軽微
    必須の id 系の引数に、値をどこから得るかが書かれていません: card_id。返してくれるツールや場所を書かないと、モデルは先に探しにいきます。id_source_missing

call_for_help

24 / 100雨

目的
14 / 20
使いどころ
5 / 20
引数
5 / 25
戻り値
0 / 15
制約と副作用
0 / 10
例
0 / 10
  • 要対応
    説明のない引数: challenge_handle、allyparam_no_description
  • 軽微
    制約も例もない文字列の引数: challenge_handle、allyloose_string_param
  • 軽微
    何が返るかが書かれていません。no_return_info
  • 軽微
    制約・副作用・認証・回数制限の記述がなく、annotations もありません。no_constraints

challenge_action

29 / 100雨

目的
17 / 20
使いどころ
5 / 20
引数
7 / 25
戻り値
0 / 15
制約と副作用
0 / 10
例
0 / 10
  • 要対応
    説明のない引数: challenge_handle、op、object、valueparam_no_description
  • 軽微
    chamber_action と説明文がほぼ同じです(類似度 0.88)。違いは名前とスキーマにしかありません。この説明文に、chamber_action を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    制約も例もない文字列の引数: challenge_handle、objectloose_string_param
  • 軽微
    引数が 3 つ以上あるのに、説明文がどの引数にも触れていません。params_not_in_description
  • 軽微
    何が返るかが書かれていません。no_return_info
  • 軽微
    制約・副作用・認証・回数制限の記述がなく、annotations もありません。no_constraints

chamber_action

29 / 100雨

目的
17 / 20
使いどころ
5 / 20
引数
7 / 25
戻り値
0 / 15
制約と副作用
0 / 10
例
0 / 10
  • 要対応
    説明のない引数: challenge_handle、op、object、valueparam_no_description
  • 軽微
    challenge_action と説明文がほぼ同じです(類似度 0.88)。違いは名前とスキーマにしかありません。この説明文に、challenge_action を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    制約も例もない文字列の引数: challenge_handle、objectloose_string_param
  • 軽微
    引数が 3 つ以上あるのに、説明文がどの引数にも触れていません。params_not_in_description
  • 軽微
    何が返るかが書かれていません。no_return_info
  • 軽微
    制約・副作用・認証・回数制限の記述がなく、annotations もありません。no_constraints

search_evidence

31 / 100雨

目的
17 / 20
使いどころ
0 / 20
引数
7 / 25
戻り値
7 / 15
制約と副作用
0 / 10
例
0 / 10
  • 要対応
    いつ使うか、いつ使わないかが書かれていません。no_usage_context
  • 要対応
    説明のない引数: suite、product、domain、card_id、limit、offsetparam_no_description
  • 軽微
    `required` が指定されていないため、すべての引数が任意になっています。no_required
  • 軽微
    引数が 3 つ以上あるのに、説明文がどの引数にも触れていません。params_not_in_description
  • 軽微
    制約・副作用・認証・回数制限の記述がなく、annotations もありません。no_constraints

observe_chamber

34 / 100雨

目的
14 / 20
使いどころ
10 / 20
引数
5 / 25
戻り値
0 / 15
制約と副作用
0 / 10
例
5 / 10
  • 要対応
    説明のない引数: challenge_handle、objectparam_no_description
  • 軽微
    制約も例もない文字列の引数: challenge_handle、objectloose_string_param
  • 軽微
    何が返るかが書かれていません。no_return_info
  • 軽微
    制約・副作用・認証・回数制限の記述がなく、annotations もありません。no_constraints

catalog

35 / 100雨

目的
10 / 20
使いどころ
0 / 20
引数
25 / 25
戻り値
0 / 15
制約と副作用
0 / 10
例
0 / 10
  • 要対応
    いつ使うか、いつ使わないかが書かれていません。no_usage_context
  • 軽微
    何が返るかが書かれていません。no_return_info
  • 軽微
    制約・副作用・認証・回数制限の記述がなく、annotations もありません。no_constraints

list_open_challenges

38 / 100雨

目的
13 / 20
使いどころ
0 / 20
引数
25 / 25
戻り値
0 / 15
制約と副作用
0 / 10
例
0 / 10
  • 要対応
    いつ使うか、いつ使わないかが書かれていません。no_usage_context
  • 軽微
    何が返るかが書かれていません。no_return_info
  • 軽微
    制約・副作用・認証・回数制限の記述がなく、annotations もありません。no_constraints

list_suites

38 / 100雨

目的
13 / 20
使いどころ
0 / 20
引数
25 / 25
戻り値
0 / 15
制約と副作用
0 / 10
例
0 / 10
  • 要対応
    いつ使うか、いつ使わないかが書かれていません。no_usage_context
  • 軽微
    何が返るかが書かれていません。no_return_info
  • 軽微
    制約・副作用・認証・回数制限の記述がなく、annotations もありません。no_constraints

enter_open_challenge

43 / 100曇り

目的
17 / 20
使いどころ
15 / 20
引数
11 / 25
戻り値
0 / 15
制約と副作用
0 / 10
例
0 / 10
  • 要対応
    説明のない引数: product、suite、seed、host、provider_claim、product_plan、model_claim、host_version、origin、preflight、preflight.tools_visible、preflight.actions_available、preflight.no_intervention_confirmedparam_no_description
  • 軽微
    start_challenge と説明文がほぼ同じです(類似度 0.94)。違いは名前とスキーマにしかありません。この説明文に、start_challenge を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    制約も例もない文字列の引数: product、seed、host、provider_claim、product_plan、model_claim、host_versionloose_string_param
  • 軽微
    真偽値の引数 preflight.tools_visible の意味が分かりにくくなっています。vague_boolean
  • 軽微
    真偽値の引数 preflight.actions_available の意味が分かりにくくなっています。vague_boolean
  • 軽微
    真偽値の引数 preflight.no_intervention_confirmed の意味が分かりにくくなっています。vague_boolean
  • 軽微
    何が返るかが書かれていません。no_return_info
  • 軽微
    制約・副作用・認証・回数制限の記述がなく、annotations もありません。no_constraints

start_challenge

43 / 100曇り

目的
17 / 20
使いどころ
15 / 20
引数
11 / 25
戻り値
0 / 15
制約と副作用
0 / 10
例
0 / 10
  • 要対応
    説明のない引数: product、suite、seed、host、provider_claim、product_plan、model_claim、host_version、origin、preflight、preflight.tools_visible、preflight.actions_available、preflight.no_intervention_confirmedparam_no_description
  • 軽微
    enter_open_challenge と説明文がほぼ同じです(類似度 0.94)。違いは名前とスキーマにしかありません。この説明文に、enter_open_challenge を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    制約も例もない文字列の引数: product、seed、host、provider_claim、product_plan、model_claim、host_versionloose_string_param
  • 軽微
    真偽値の引数 preflight.tools_visible の意味が分かりにくくなっています。vague_boolean
  • 軽微
    真偽値の引数 preflight.actions_available の意味が分かりにくくなっています。vague_boolean
  • 軽微
    真偽値の引数 preflight.no_intervention_confirmed の意味が分かりにくくなっています。vague_boolean
  • 軽微
    何が返るかが書かれていません。no_return_info
  • 軽微
    制約・副作用・認証・回数制限の記述がなく、annotations もありません。no_constraints

open_challenge

47 / 100曇り

目的
17 / 20
使いどころ
5 / 20
引数
25 / 25
戻り値
0 / 15
制約と副作用
0 / 10
例
0 / 10
  • 軽微
    何が返るかが書かれていません。no_return_info
  • 軽微
    制約・副作用・認証・回数制限の記述がなく、annotations もありません。no_constraints

静的な採点で分からないこと

この点数は、説明文とスキーマの文字だけを読んで付けています。書かれているかどうかを示すもので、モデルがどう動くかではありません。browser_close のように、短くても名前で意味が明らかなツールは、実際にはモデルが正しく使えていても低く出ます。私たちの計測でも、名前とスキーマが違えば、いまのモデルは 1 行の説明文からでも 1 手で正しいツールを選びました。文字からは分からないこと(数手にわたる動き、書き足した一文が助けになるか誤らせるか)は、Pro と Team のプランの評価で測れます。

ご自身のサーバーの掲載をやめてほしい場合は、support@forecall.dev までご連絡ください。7 日以内に外します。

採点したサーバーの一覧