Forecall
失敗レコードドキュメント
採点したサーバーの一覧

tlly: ツールの説明文の採点結果 dev.tlly/tlly

tools/list の取得日
(UTC)
出どころ
公式の MCP Registry
接続した URL
https://tlly.dev/mcp
ホームページ
tlly.dev
リポジトリ
github.com/FifthsegmentEng/tlly-mcp
採点の規則
v2
掲載の取り下げ
support@forecall.dev
この URL のいまの状態を採点する

載せているのは点数、指摘、名前だけです

このページには、tlly (dev.tlly/tlly) のツールの説明文の点数と指摘、ツールと引数の名前を載せています。説明文はサーバーのものなので、出どころのページでお読みください。

このサーバーが公式の MCP Registry に載せている URL に、上の日に 1 度だけ接続して tools/list を取りました（ツールは呼んでいません）。その後、サーバーが変わっているかもしれません。

servers/dev.tlly/tlly
平均点
52.9 / 100曇り
ツールの数
30
説明がほぼ同じ組
8

サーバー全体

  • 軽微
    ツールが 30 個あります。25 を超えると、モデルがツールを見分けにくくなり始めます。many_tools

説明文がほぼ同じツールの組

8 組のうち 8 組を、説明の類似度が高い順に表示しています。
ツールツール説明の類似度名前の類似度
test_jobcreate_job0.960.33
test_jobupdate_job0.960.33
create_jobupdate_job0.960.33
create_jobimport_once0.930.00
import_onceupdate_job0.930.00
test_jobimport_once0.920.00
create_dashboardupdate_dashboard0.910.33
get_serieslist_annotations0.600.00

ツール

get_series

24 / 100雨

目的
6 / 20
使いどころ
0 / 20
引数
11 / 25
戻り値
0 / 15
制約と副作用
7 / 10
例
0 / 10
  • 要対応
    説明文が名前の言い換えになっています（7 語）。restates_name
  • 要対応
    説明文が短すぎます（7 語）。too_short
  • 要対応
    いつ使うか、いつ使わないかが書かれていません。no_usage_context
  • 軽微
    list_annotations と説明文がほぼ同じです（類似度 0.60）。違いは名前とスキーマにしかありません。この説明文に、list_annotations を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    説明のない引数: limitparam_no_description
  • 軽微
    制約も例もない文字列の引数: seriesloose_string_param
  • 軽微
    何が返るかが書かれていません。no_return_info

list_annotations

24 / 100雨

目的
6 / 20
使いどころ
0 / 20
引数
11 / 25
戻り値
0 / 15
制約と副作用
7 / 10
例
0 / 10
  • 要対応
    説明文が名前の言い換えになっています（7 語）。restates_name
  • 要対応
    説明文が短すぎます（7 語）。too_short
  • 要対応
    いつ使うか、いつ使わないかが書かれていません。no_usage_context
  • 軽微
    get_series と説明文がほぼ同じです（類似度 0.60）。違いは名前とスキーマにしかありません。この説明文に、get_series を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    説明のない引数: limitparam_no_description
  • 軽微
    制約も例もない文字列の引数: seriesloose_string_param
  • 軽微
    何が返るかが書かれていません。no_return_info

delete_dashboard

31 / 100雨

目的
6 / 20
使いどころ
0 / 20
引数
18 / 25
戻り値
0 / 15
制約と副作用
7 / 10
例
0 / 10
  • 要対応
    説明文が名前の言い換えになっています（7 語）。restates_name
  • 要対応
    説明文が短すぎます（7 語）。too_short
  • 要対応
    いつ使うか、いつ使わないかが書かれていません。no_usage_context
  • 軽微
    制約も例もない文字列の引数: dashboard_idloose_string_param
  • 軽微
    何が返るかが書かれていません。no_return_info
  • 軽微
    必須の id 系の引数に、値をどこから得るかが書かれていません: dashboard_id。返してくれるツールや場所を書かないと、モデルは先に探しにいきます。id_source_missing

delete_job

31 / 100雨

目的
6 / 20
使いどころ
0 / 20
引数
18 / 25
戻り値
0 / 15
制約と副作用
7 / 10
例
0 / 10
  • 要対応
    説明文が名前の言い換えになっています（8 語）。restates_name
  • 要対応
    いつ使うか、いつ使わないかが書かれていません。no_usage_context
  • 軽微
    制約も例もない文字列の引数: job_idloose_string_param
  • 軽微
    何が返るかが書かれていません。no_return_info
  • 軽微
    必須の id 系の引数に、値をどこから得るかが書かれていません: job_id。返してくれるツールや場所を書かないと、モデルは先に探しにいきます。id_source_missing

delete_annotations

35 / 100雨

目的
17 / 20
使いどころ
0 / 20
引数
11 / 25
戻り値
0 / 15
制約と副作用
7 / 10
例
0 / 10
  • 要対応
    いつ使うか、いつ使わないかが書かれていません。no_usage_context
  • 軽微
    説明のない引数: datesparam_no_description
  • 軽微
    制約も例もない文字列の引数: seriesloose_string_param
  • 軽微
    何が返るかが書かれていません。no_return_info

list_dashboards

38 / 100雨

目的
6 / 20
使いどころ
0 / 20
引数
25 / 25
戻り値
0 / 15
制約と副作用
7 / 10
例
0 / 10
  • 要対応
    説明文が名前の言い換えになっています（5 語）。restates_name
  • 要対応
    説明文が短すぎます（5 語）。too_short
  • 要対応
    いつ使うか、いつ使わないかが書かれていません。no_usage_context
  • 軽微
    何が返るかが書かれていません。no_return_info

publish_dashboard_version

39 / 100雨

目的
14 / 20
使いどころ
0 / 20
引数
18 / 25
戻り値
0 / 15
制約と副作用
7 / 10
例
0 / 10
  • 要対応
    いつ使うか、いつ使わないかが書かれていません。no_usage_context
  • 軽微
    制約も例もない文字列の引数: dashboard_idloose_string_param
  • 軽微
    何が返るかが書かれていません。no_return_info
  • 軽微
    必須の id 系の引数に、値をどこから得るかが書かれていません: dashboard_id。返してくれるツールや場所を書かないと、モデルは先に探しにいきます。id_source_missing

delete_series

42 / 100曇り

目的
17 / 20
使いどころ
0 / 20
引数
18 / 25
戻り値
0 / 15
制約と副作用
7 / 10
例
0 / 10
  • 要対応
    いつ使うか、いつ使わないかが書かれていません。no_usage_context
  • 軽微
    制約も例もない文字列の引数: seriesloose_string_param
  • 軽微
    何が返るかが書かれていません。no_return_info

list_dashboard_versions

42 / 100曇り

目的
17 / 20
使いどころ
0 / 20
引数
18 / 25
戻り値
0 / 15
制約と副作用
7 / 10
例
0 / 10
  • 要対応
    いつ使うか、いつ使わないかが書かれていません。no_usage_context
  • 軽微
    制約も例もない文字列の引数: dashboard_idloose_string_param
  • 軽微
    何が返るかが書かれていません。no_return_info
  • 軽微
    必須の id 系の引数に、値をどこから得るかが書かれていません: dashboard_id。返してくれるツールや場所を書かないと、モデルは先に探しにいきます。id_source_missing

get_status

46 / 100曇り

目的
14 / 20
使いどころ
0 / 20
引数
25 / 25
戻り値
0 / 15
制約と副作用
7 / 10
例
0 / 10
  • 要対応
    いつ使うか、いつ使わないかが書かれていません。no_usage_context
  • 軽微
    何が返るかが書かれていません。no_return_info

get_usage

49 / 100曇り

目的
14 / 20
使いどころ
0 / 20
引数
25 / 25
戻り値
0 / 15
制約と副作用
10 / 10
例
0 / 10
  • 要対応
    いつ使うか、いつ使わないかが書かれていません。no_usage_context
  • 軽微
    何が返るかが書かれていません。no_return_info

list_jobs

49 / 100曇り

目的
17 / 20
使いどころ
0 / 20
引数
25 / 25
戻り値
0 / 15
制約と副作用
7 / 10
例
0 / 10
  • 要対応
    いつ使うか、いつ使わないかが書かれていません。no_usage_context
  • 軽微
    何が返るかが書かれていません。no_return_info

list_series

49 / 100曇り

目的
17 / 20
使いどころ
0 / 20
引数
25 / 25
戻り値
0 / 15
制約と副作用
7 / 10
例
0 / 10
  • 要対応
    いつ使うか、いつ使わないかが書かれていません。no_usage_context
  • 軽微
    何が返るかが書かれていません。no_return_info

run_job_now

49 / 100曇り

目的
17 / 20
使いどころ
0 / 20
引数
18 / 25
戻り値
7 / 15
制約と副作用
7 / 10
例
0 / 10
  • 要対応
    いつ使うか、いつ使わないかが書かれていません。no_usage_context
  • 軽微
    制約も例もない文字列の引数: job_idloose_string_param
  • 軽微
    必須の id 系の引数に、値をどこから得るかが書かれていません: job_id。返してくれるツールや場所を書かないと、モデルは先に探しにいきます。id_source_missing

rotate_dashboard_url

50 / 100曇り

目的
20 / 20
使いどころ
0 / 20
引数
18 / 25
戻り値
0 / 15
制約と副作用
7 / 10
例
5 / 10
  • 要対応
    いつ使うか、いつ使わないかが書かれていません。no_usage_context
  • 軽微
    制約も例もない文字列の引数: dashboard_idloose_string_param
  • 軽微
    何が返るかが書かれていません。no_return_info
  • 軽微
    必須の id 系の引数に、値をどこから得るかが書かれていません: dashboard_id。返してくれるツールや場所を書かないと、モデルは先に探しにいきます。id_source_missing

list_integration_skills

52 / 100曇り

目的
20 / 20
使いどころ
0 / 20
引数
25 / 25
戻り値
0 / 15
制約と副作用
7 / 10
例
0 / 10
  • 要対応
    いつ使うか、いつ使わないかが書かれていません。no_usage_context
  • 軽微
    何が返るかが書かれていません。no_return_info

list_secrets

52 / 100曇り

目的
20 / 20
使いどころ
0 / 20
引数
25 / 25
戻り値
0 / 15
制約と副作用
7 / 10
例
0 / 10
  • 要対応
    いつ使うか、いつ使わないかが書かれていません。no_usage_context
  • 軽微
    何が返るかが書かれていません。no_return_info

add_annotations

58 / 100曇り

目的
20 / 20
使いどころ
0 / 20
引数
18 / 25
戻り値
0 / 15
制約と副作用
10 / 10
例
10 / 10
  • 要対応
    いつ使うか、いつ使わないかが書かれていません。no_usage_context
  • 軽微
    制約も例もない文字列の引数: seriesloose_string_param
  • 軽微
    何が返るかが書かれていません。no_return_info

set_panel_alert

58 / 100曇り

目的
20 / 20
使いどころ
10 / 20
引数
18 / 25
戻り値
0 / 15
制約と副作用
10 / 10
例
0 / 10
  • 軽微
    制約も例もない文字列の引数: dashboard_idloose_string_param
  • 軽微
    何が返るかが書かれていません。no_return_info
  • 軽微
    必須の id 系の引数に、値をどこから得るかが書かれていません: dashboard_id。返してくれるツールや場所を書かないと、モデルは先に探しにいきます。id_source_missing

get_integration_skill

60 / 100曇り

目的
20 / 20
使いどころ
0 / 20
引数
18 / 25
戻り値
7 / 15
制約と副作用
10 / 10
例
5 / 10
  • 要対応
    いつ使うか、いつ使わないかが書かれていません。no_usage_context
  • 軽微
    必須の id 系の引数に、値をどこから得るかが書かれていません: id。返してくれるツールや場所を書かないと、モデルは先に探しにいきます。id_source_missing

set_alert_webhook

60 / 100曇り

目的
20 / 20
使いどころ
10 / 20
引数
18 / 25
戻り値
0 / 15
制約と副作用
7 / 10
例
5 / 10
  • 軽微
    何が返るかが書かれていません。no_return_info

set_stale_alert

60 / 100曇り

目的
20 / 20
使いどころ
10 / 20
引数
18 / 25
戻り値
0 / 15
制約と副作用
7 / 10
例
5 / 10
  • 軽微
    制約も例もない文字列の引数: dashboard_id、seriesloose_string_param
  • 軽微
    何が返るかが書かれていません。no_return_info

update_dashboard

63 / 100曇り

目的
20 / 20
使いどころ
10 / 20
引数
18 / 25
戻り値
0 / 15
制約と副作用
10 / 10
例
5 / 10
  • 軽微
    create_dashboard と説明文がほぼ同じです（類似度 0.91）。違いは名前とスキーマにしかありません。この説明文に、create_dashboard を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    説明文が長めです（671 語）。選択の精度は上がりますが、手数とトークンが増えます。too_long
  • 軽微
    制約も例もない文字列の引数: dashboard_idloose_string_param
  • 軽微
    何が返るかが書かれていません。no_return_info
  • 軽微
    必須の id 系の引数に、値をどこから得るかが書かれていません: dashboard_id。返してくれるツールや場所を書かないと、モデルは先に探しにいきます。id_source_missing

define_derived

65 / 100曇り

目的
20 / 20
使いどころ
5 / 20
引数
18 / 25
戻り値
7 / 15
制約と副作用
10 / 10
例
5 / 10

指摘はありません。

push_points

65 / 100曇り

目的
20 / 20
使いどころ
10 / 20
引数
18 / 25
戻り値
0 / 15
制約と副作用
7 / 10
例
10 / 10
  • 軽微
    何が返るかが書かれていません。no_return_info

create_dashboard

75 / 100晴れ

目的
20 / 20
使いどころ
10 / 20
引数
23 / 25
戻り値
7 / 15
制約と副作用
10 / 10
例
5 / 10
  • 軽微
    update_dashboard と説明文がほぼ同じです（類似度 0.91）。違いは名前とスキーマにしかありません。この説明文に、update_dashboard を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    説明文が長めです（622 語）。選択の精度は上がりますが、手数とトークンが増えます。too_long

update_job

75 / 100晴れ

目的
20 / 20
使いどころ
20 / 20
引数
13 / 25
戻り値
7 / 15
制約と副作用
10 / 10
例
5 / 10
  • 軽微
    test_job と説明文がほぼ同じです（類似度 0.96）。違いは名前とスキーマにしかありません。この説明文に、test_job を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    create_job と説明文がほぼ同じです（類似度 0.96）。違いは名前とスキーマにしかありません。この説明文に、create_job を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    import_once と説明文がほぼ同じです（類似度 0.93）。違いは名前とスキーマにしかありません。この説明文に、import_once を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    説明文が長めです（597 語）。選択の精度は上がりますが、手数とトークンが増えます。too_long
  • 軽微
    説明のない引数: enabledparam_no_description
  • 軽微
    制約も例もない文字列の引数: job_idloose_string_param
  • 軽微
    真偽値の引数 enabled の意味が分かりにくくなっています。vague_boolean
  • 軽微
    必須の id 系の引数に、値をどこから得るかが書かれていません: job_id。返してくれるツールや場所を書かないと、モデルは先に探しにいきます。id_source_missing

create_job

80 / 100晴れ

目的
20 / 20
使いどころ
20 / 20
引数
18 / 25
戻り値
7 / 15
制約と副作用
10 / 10
例
5 / 10
  • 軽微
    test_job と説明文がほぼ同じです（類似度 0.96）。違いは名前とスキーマにしかありません。この説明文に、test_job を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    update_job と説明文がほぼ同じです（類似度 0.96）。違いは名前とスキーマにしかありません。この説明文に、update_job を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    import_once と説明文がほぼ同じです（類似度 0.93）。違いは名前とスキーマにしかありません。この説明文に、import_once を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    説明文が長めです（599 語）。選択の精度は上がりますが、手数とトークンが増えます。too_long
  • 軽微
    制約も例もない文字列の引数: nameloose_string_param

test_job

82 / 100晴れ

目的
17 / 20
使いどころ
20 / 20
引数
23 / 25
戻り値
7 / 15
制約と副作用
10 / 10
例
5 / 10
  • 軽微
    create_job と説明文がほぼ同じです（類似度 0.96）。違いは名前とスキーマにしかありません。この説明文に、create_job を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    update_job と説明文がほぼ同じです（類似度 0.96）。違いは名前とスキーマにしかありません。この説明文に、update_job を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    import_once と説明文がほぼ同じです（類似度 0.92）。違いは名前とスキーマにしかありません。この説明文に、import_once を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    説明文が長めです（599 語）。選択の精度は上がりますが、手数とトークンが増えます。too_long

import_once

85 / 100晴れ

目的
20 / 20
使いどころ
20 / 20
引数
23 / 25
戻り値
7 / 15
制約と副作用
10 / 10
例
5 / 10
  • 軽微
    create_job と説明文がほぼ同じです（類似度 0.93）。違いは名前とスキーマにしかありません。この説明文に、create_job を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    update_job と説明文がほぼ同じです（類似度 0.93）。違いは名前とスキーマにしかありません。この説明文に、update_job を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    test_job と説明文がほぼ同じです（類似度 0.92）。違いは名前とスキーマにしかありません。この説明文に、test_job を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    説明文が長めです（625 語）。選択の精度は上がりますが、手数とトークンが増えます。too_long

静的な採点で分からないこと

この点数は、説明文とスキーマの文字だけを読んで付けています。書かれているかどうかを示すもので、モデルがどう動くかではありません。browser_close のように、短くても名前で意味が明らかなツールは、実際にはモデルが正しく使えていても低く出ます。私たちの計測でも、名前とスキーマが違えば、いまのモデルは 1 行の説明文からでも 1 手で正しいツールを選びました。文字からは分からないこと（数手にわたる動き、書き足した一文が助けになるか誤らせるか）は、Pro と Team のプランの評価で測れます。

ご自身のサーバーの掲載をやめてほしい場合は、support@forecall.dev までご連絡ください。7 日以内に外します。

採点したサーバーの一覧