採点したサーバーの一覧

Plumbline — a trust layer for LLM answers: ツールの説明文の採点結果 com.lattice-sys.plumbline/mcp

tools/list の取得日
(UTC)
接続した URL
https://plumbline.lattice-sys.com/mcp/demo
ホームページ
plumbline.lattice-sys.com
採点の規則
v2
掲載の取り下げ
support@forecall.dev
この URL のいまの状態を採点する

載せているのは点数、指摘、名前だけです

このページには、Plumbline — a trust layer for LLM answers (com.lattice-sys.plumbline/mcp) のツールの説明文の点数と指摘、ツールと引数の名前を載せています。説明文はサーバーのものなので、出どころのページでお読みください。

このサーバーが公式の MCP Registry に載せている URL に、上の日に 1 度だけ接続して tools/list を取りました(ツールは呼んでいません)。その後、サーバーが変わっているかもしれません。

servers/com.lattice-sys.plumbline/mcp
平均点
69.7 / 100曇り
ツールの数
18
説明がほぼ同じ組
10

サーバー全体

  • 軽微
    サーバーに instructions がありません。何のためのサーバーで、いつ使うかを、そこに 1 回だけ書いてください。Claude Code と Gemini CLI は、ツールの説明より先に instructions を読みます。instructions_missing

説明文がほぼ同じツールの組

10 組のうち 10 組を、説明の類似度が高い順に表示しています。
ツールツール説明の類似度名前の類似度
compare_departmentsget_manager_chain0.730.00
get_manager_chainsearch_employee0.720.00
compare_departmentsfind_payroll_anomalies0.710.00
find_payroll_anomaliesget_manager_chain0.710.00
compare_departmentssummarize_benefits0.690.00
get_manager_chainsummarize_benefits0.690.00
compare_departmentssearch_employee0.680.00
find_payroll_anomaliessummarize_benefits0.680.00
find_payroll_anomaliessearch_employee0.660.00
search_employeesummarize_benefits0.640.00

ツール

ask_submit_draft

52 / 100曇り

目的
17 / 20
使いどころ
0 / 20
引数
20 / 25
戻り値
8 / 15
制約と副作用
7 / 10
例
0 / 10
  • 要対応
    いつ使うか、いつ使わないかが書かれていません。no_usage_context

get_ai_act_transparency

64 / 100曇り

目的
17 / 20
使いどころ
0 / 20
引数
25 / 25
戻り値
15 / 15
制約と副作用
7 / 10
例
0 / 10
  • 要対応
    いつ使うか、いつ使わないかが書かれていません。no_usage_context

ask_result

65 / 100曇り

目的
20 / 20
使いどころ
5 / 20
引数
20 / 25
戻り値
8 / 15
制約と副作用
7 / 10
例
5 / 10

指摘はありません。

compare_departments

67 / 100曇り

目的
20 / 20
使いどころ
5 / 20
引数
20 / 25
戻り値
15 / 15
制約と副作用
7 / 10
例
0 / 10
  • 軽微
    get_manager_chain と説明文がほぼ同じです(類似度 0.73)。違いは名前とスキーマにしかありません。この説明文に、get_manager_chain を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    find_payroll_anomalies と説明文がほぼ同じです(類似度 0.71)。違いは名前とスキーマにしかありません。この説明文に、find_payroll_anomalies を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    summarize_benefits と説明文がほぼ同じです(類似度 0.69)。違いは名前とスキーマにしかありません。この説明文に、summarize_benefits を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    search_employee と説明文がほぼ同じです(類似度 0.68)。違いは名前とスキーマにしかありません。この説明文に、search_employee を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    制約も例もない文字列の引数: a、bloose_string_param

get_manager_chain

67 / 100曇り

目的
20 / 20
使いどころ
5 / 20
引数
20 / 25
戻り値
15 / 15
制約と副作用
7 / 10
例
0 / 10
  • 軽微
    compare_departments と説明文がほぼ同じです(類似度 0.73)。違いは名前とスキーマにしかありません。この説明文に、compare_departments を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    search_employee と説明文がほぼ同じです(類似度 0.72)。違いは名前とスキーマにしかありません。この説明文に、search_employee を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    find_payroll_anomalies と説明文がほぼ同じです(類似度 0.71)。違いは名前とスキーマにしかありません。この説明文に、find_payroll_anomalies を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    summarize_benefits と説明文がほぼ同じです(類似度 0.69)。違いは名前とスキーマにしかありません。この説明文に、summarize_benefits を使うのはどんなときかを書いてください。confusable_pair

search_employee

67 / 100曇り

目的
20 / 20
使いどころ
5 / 20
引数
20 / 25
戻り値
15 / 15
制約と副作用
7 / 10
例
0 / 10
  • 軽微
    get_manager_chain と説明文がほぼ同じです(類似度 0.72)。違いは名前とスキーマにしかありません。この説明文に、get_manager_chain を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    compare_departments と説明文がほぼ同じです(類似度 0.68)。違いは名前とスキーマにしかありません。この説明文に、compare_departments を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    find_payroll_anomalies と説明文がほぼ同じです(類似度 0.66)。違いは名前とスキーマにしかありません。この説明文に、find_payroll_anomalies を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    summarize_benefits と説明文がほぼ同じです(類似度 0.64)。違いは名前とスキーマにしかありません。この説明文に、summarize_benefits を使うのはどんなときかを書いてください。confusable_pair

trust_finalize

67 / 100曇り

目的
20 / 20
使いどころ
0 / 20
引数
25 / 25
戻り値
15 / 15
制約と副作用
7 / 10
例
0 / 10
  • 要対応
    いつ使うか、いつ使わないかが書かれていません。no_usage_context

run_sql

68 / 100曇り

目的
20 / 20
使いどころ
0 / 20
引数
20 / 25
戻り値
8 / 15
制約と副作用
10 / 10
例
10 / 10
  • 要対応
    いつ使うか、いつ使わないかが書かれていません。no_usage_context

cross_check

69 / 100曇り

目的
17 / 20
使いどころ
0 / 20
引数
20 / 25
戻り値
15 / 15
制約と副作用
7 / 10
例
10 / 10
  • 要対応
    いつ使うか、いつ使わないかが書かれていません。no_usage_context

find_payroll_anomalies

69 / 100曇り

目的
17 / 20
使いどころ
5 / 20
引数
25 / 25
戻り値
15 / 15
制約と副作用
7 / 10
例
0 / 10
  • 軽微
    compare_departments と説明文がほぼ同じです(類似度 0.71)。違いは名前とスキーマにしかありません。この説明文に、compare_departments を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    get_manager_chain と説明文がほぼ同じです(類似度 0.71)。違いは名前とスキーマにしかありません。この説明文に、get_manager_chain を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    summarize_benefits と説明文がほぼ同じです(類似度 0.68)。違いは名前とスキーマにしかありません。この説明文に、summarize_benefits を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    search_employee と説明文がほぼ同じです(類似度 0.66)。違いは名前とスキーマにしかありません。この説明文に、search_employee を使うのはどんなときかを書いてください。confusable_pair

get_answer_queries

70 / 100晴れ

目的
20 / 20
使いどころ
5 / 20
引数
20 / 25
戻り値
15 / 15
制約と副作用
10 / 10
例
0 / 10

指摘はありません。

query_fact

70 / 100晴れ

目的
20 / 20
使いどころ
5 / 20
引数
20 / 25
戻り値
15 / 15
制約と副作用
10 / 10
例
0 / 10
  • 軽微
    必須の id 系の引数に、値をどこから得るかが書かれていません: query_id。返してくれるツールや場所を書かないと、モデルは先に探しにいきます。id_source_missing

run_code

70 / 100晴れ

目的
20 / 20
使いどころ
0 / 20
引数
20 / 25
戻り値
15 / 15
制約と副作用
10 / 10
例
5 / 10
  • 要対応
    いつ使うか、いつ使わないかが書かれていません。no_usage_context

search_docs

72 / 100晴れ

目的
20 / 20
使いどころ
5 / 20
引数
20 / 25
戻り値
15 / 15
制約と副作用
7 / 10
例
5 / 10

指摘はありません。

summarize_benefits

74 / 100晴れ

目的
20 / 20
使いどころ
5 / 20
引数
17 / 25
戻り値
15 / 15
制約と副作用
7 / 10
例
10 / 10
  • 軽微
    compare_departments と説明文がほぼ同じです(類似度 0.69)。違いは名前とスキーマにしかありません。この説明文に、compare_departments を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    get_manager_chain と説明文がほぼ同じです(類似度 0.69)。違いは名前とスキーマにしかありません。この説明文に、get_manager_chain を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    find_payroll_anomalies と説明文がほぼ同じです(類似度 0.68)。違いは名前とスキーマにしかありません。この説明文に、find_payroll_anomalies を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    search_employee と説明文がほぼ同じです(類似度 0.64)。違いは名前とスキーマにしかありません。この説明文に、search_employee を使うのはどんなときかを書いてください。confusable_pair
  • 軽微
    `required` が指定されていないため、すべての引数が任意になっています。no_required

get_evidence_document

75 / 100晴れ

目的
20 / 20
使いどころ
10 / 20
引数
20 / 25
戻り値
15 / 15
制約と副作用
10 / 10
例
0 / 10
  • 軽微
    必須の id 系の引数に、値をどこから得るかが書かれていません: document_id。返してくれるツールや場所を書かないと、モデルは先に探しにいきます。id_source_missing

describe_fact_capabilities

82 / 100晴れ

目的
20 / 20
使いどころ
15 / 20
引数
25 / 25
戻り値
15 / 15
制約と副作用
7 / 10
例
0 / 10

指摘はありません。

ask_prepare

87 / 100晴れ

目的
17 / 20
使いどころ
15 / 20
引数
20 / 25
戻り値
15 / 15
制約と副作用
10 / 10
例
10 / 10

指摘はありません。

静的な採点で分からないこと

この点数は、説明文とスキーマの文字だけを読んで付けています。書かれているかどうかを示すもので、モデルがどう動くかではありません。browser_close のように、短くても名前で意味が明らかなツールは、実際にはモデルが正しく使えていても低く出ます。私たちの計測でも、名前とスキーマが違えば、いまのモデルは 1 行の説明文からでも 1 手で正しいツールを選びました。文字からは分からないこと(数手にわたる動き、書き足した一文が助けになるか誤らせるか)は、Pro と Team のプランの評価で測れます。

ご自身のサーバーの掲載をやめてほしい場合は、support@forecall.dev までご連絡ください。7 日以内に外します。

採点したサーバーの一覧