採点の方法 v1.5(2026-11-19)
ARI Award 2027 Global の採点は、この文書と、下の「探し方の手順」「判例集」で行う。作業役と確認役は、ほかの物を使わない。
0. 何を測り、何を測らないか
- 測る物: 公開されている資料で確かめられる、接続の手段と開発者向けの資産。
- 測らない物: 実際に動かした結果・製品の品質・安全性・業務をどこまでやり切れるか。高い等級は「導入を勧める」「安全」「実際に使える」の証明ではない。
- 物差し A(チャットの AI 向け): その製品のために用意された接続手段(MCP)が公開されているかを重く見る。API だけの製品は最高 60 点。
- 物差し B(コードを書く AI 向け): API で開発するための公開の資産と、使い始める手順の整い方。高い点でも、契約・申請・審査が要ることがある。
- 申請や審査には、安全や法令のための正当な理由があることがある。等級は製品の良し悪しではなく、公開資料から確かめられる接続の資産と、使い始める手順を表す。
- 公開資料から確かめられなかった事は、その機能や接続の手段が無いという意味ではない。
- 2 本を足した等級は作らない。業種ごとに基準は変えない(次の版の課題。今回、業種別に各項目の点と状態の分布を集計して公開し、次の版の根拠にする)。
- 原則: ①「ある/ない」だけを見る。中身の出来(コードが正しく動くか)は見ない ②制限の理由の当否は採点しない ③誰が数えても同じ点 ④迷ったら点を入れず「未確認」。
1. 採点の単位
- 1.1 対象を先に固定する: 製品・クラウド版・地域・プラン・追加の契約を「対象の表」に書き、作業役の全員に同じ表を渡す。採点するのは、その条件で使えると資料に書いてある物だけ。プランの指定が無い時は「どれか 1 つのプランで、数える物の全部が一緒に使える」こと。資料にプランの制限が書いていなければ、一緒に使えるとみなす。
- 1.2 点を寄せ集めない:
- 物差し A は、候補になる接続の道ごとに A1〜A4 を計算し、A1 単独ではなく合計がいちばん高い道を採る。同点の道は併記する。別の道の認証・文書・配布を足さない。
- 物差し B は、A で採った道とは独立に、対象の条件に合う API ごとに B1〜B5 を計算し、合計がいちばん高い 1 組を採る。API の名前・版・対象の操作を記録する。別の API・別の版の資産を足さない。
- 探した範囲で見つけた候補のそれぞれについて A1〜A4(または B1〜B5)を確かめてから、最大の組を選ぶ。残りの候補を省いてよいのは、その候補が満点でも、採る結果・同点の併記・幅・バッジが変わらないと示せる時だけ。
- 1.3 自社の製品群で共通の資産(共通の MCP・SDK・文書): その製品に当てはまると資料に書いてある範囲だけ数える。会社の名前が同じというだけでは数えない。
- 1.4 OSS のクラウド版: OSS 本体の API・SDK を自動では数えない。対象のクラウド版で提供されていると確かめた物だけ。OSS の本体向けに作られた第三者の MCP は、その MCP が使う API を、対象のクラウド版が提供していると運営者の資料で確かめられる時に数える。
- 1.5 API の向き: 何を読み書きする接続かを書く。通知を受けるだけの口(webhook の受信だけ)は、A1 の公開 API と B1 に数えない。
- 1.6 根拠の出どころ: 「その製品に当てはまる事」と「提供者が誰か」は、別々に根拠を取る。第三者の MCP の操作・つなぎ方・配布は、その提供者の公開文書で確かめる。ベンダーの承認は条件にしない。
- 1.7 公式サイトが開けない時(地域の制限など): ほかの公開の一次資料(公式 MCP Registry のベンダーの名前空間の掲載・提供者のリポジトリ・接続先の公開メタデータ)で確かめられる項目を数え、残りを「未確認」にする。Registry のベンダーの名前空間の掲載がリンクしているリポジトリは、提供者の文書として数える(A3 を含む)。情報欄に「この地域からは開けない」と書く。
- 1.8 文書の公式性: 対象に当てはまると確かめられる、ベンダーが持つドメイン(製品のホストを含む)の文書は、公式サイトからのリンクを要らない。外の文書サービスや OSS 本体の文書は、ベンダーによる案内(リンクか明記)が要る。
2. 物差し A(満点 90)
A1 接続口
- 公式 MCP=50: 運営会社(その親会社・子会社を含む)が提供者であると明記した MCP サーバー。
- 第三者 MCP=40: 提供者・対象の製品名・つなぎ方が公開の資料で分かる、その製品のための MCP サーバー。「提供者は第三者」と書き、会社の関与は確かめられた範囲で別に書く。更新日・公開コードの有無は情報欄(点の条件にしない)。
- 公式・第三者に共通の条件:
- 業務の中身: 対象の製品の利用者のデータか、製品が提供する業務の内容(ナレッジ・法令・記事など)を、取得・検索・変更できると、公開の資料で確かめる。何を取得・変更できるかの説明があれば足りる。道具(Tool)や資源(Resource)の名前は要らない。 対象の製品の API を呼ぶ「何でも呼べる道具」だけの MCP も、対象の製品の API を呼ぶと書いてあれば数える。その製品の使い方を説明する開発者向け文書だけを返す物は数えない(情報欄に「文書用の MCP」)。
- 提供中: 対象の条件で今使えると確かめられる物だけ。予告・順番待ち・招待の選考中・提供を終えた道は数えない。提供の状況が分からなければ「未確認」。preview・beta でも、対象の契約者が今使い始められるなら数える(情報欄)。
- 数えない道がある時は、ほかの MCP か公開 API で数える(A1 全体を 0 にしない)。
- 仲介型は点に入れない: 他社の製品への接続を集めて提供する仲介のサービスの MCP(Zapier・Composio・Pipedream など)は、製品ごとの URL に分かれていても点に入れない。情報欄に「仲介型で接続できる」。自社の製品群を扱う共通の MCP(例: 1 社の複数製品を扱う公式の MCP)は仲介型ではなく、1.3 で判定する。
- 公開 API=30: 対象の API について、ベンダーが公式の文書として案内する資料で、1 つ以上の操作について、その名前と、入力か応答のどちらかの説明を、ログインなしで確かめられる(B1 と同じ基準)。SSO の連携のための設定値(OIDC・SAML の口)は、製品の API に数えない。文書に「一般には開放していない」とあっても 30(情報欄。誰が使えるかは B3)。
- 販売代理店・導入支援の会社・個人が作った MCP は第三者。単なる紹介のリンクは「提供」ではない。
A2 認証(A1 で採った道の認証)
- どの区間か: 遠隔の MCP は「クライアント → MCP」の認証。手元で動かす MCP は「利用者が設定する、SaaS への認証」。公開 API の道はその API の認証。
- 何を渡すかで分ける(送り方では分けない):
- 20: 利用者の同意を取る OAuth の流れ(認可コードなど)が、その道で使えると、文書か、その道の認可サーバーのメタデータ(対応する流れの一覧)で確かめられる。
- 15: Client Credentials だけ。
- 10: API キー・固定のトークン(Bearer で送る物・Basic 認証の形でキーを送る物を含む)。
- 5: 人のユーザー名とパスワードを送る。
- 利用者が鍵や証明書を設定する方式(署名つきの JWT を含む)は 10。
- 0・確認: 認証が要らない道、上のどれでもない方式。
- 0・未確認: 方式が分からない。「Client ID と Secret」とだけあり流れの名前が無い。認証サーバーの場所が分かるだけ(
.well-known が JSON を返すだけ)では 20 にしない。
- 製品が SSO や OAuth を提供する側であること(ID 管理の製品)と、その製品の接続口が OAuth で守られていることを混ぜない。
- 1 つの道が複数の方式から選べる時は高い方。同じ道で OAuth と鍵・証明書を一緒に使う時は、確かめられた利用者の同意の OAuth を 20、Client Credentials を 15 とし、鍵・証明書を使うことだけを理由に 10 へ下げない(10 は、OAuth の流れが無く、鍵・証明書・固定のトークンだけで認証する時)。
- A1 が 0(採る道が無い)の時、A2〜A4 は「対象外」。
A3 開発者向け文書(10)
- 置き場や文書の名前を問わず、採った道のつなぎ方の設定か、具体的な操作の手順を説明する、提供者の公開の文書。機能の紹介だけのページは数えない。採った道と違う道の文書(例: MCP を採ったのに REST API の文書)は数えない。
A4 配布(10)
- A1 で採った MCP について、その提供者が、パッケージ・リポジトリ・遠隔の接続先の URL・利用者ごとの URL を得る手順のどれかを公開している。動かして確かめることはしない。
- A1 が公開 API の道では、A4 は対象外(0)。
3. 物差し B(満点 90)
B1 API リファレンス(30)
- 対象の API について、ベンダーが公式の文書として案内する資料で、1 つ以上の操作について、その名前と、入力か応答のどちらかの説明を、ログインなしで確かめられる。場所は 1.8 のとおり(ベンダーのドメインの文書はリンク不要・外の文書サービスはベンダーの案内が要る)。クラウドの提供者が「この本体の公式リファレンスを使う」と案内している時は、その参照先を数える。有志の文書は数えない。
- リファレンスとは、API の操作を説明するために書かれた文書。更新履歴・お知らせ・ブログの中に操作の説明が 1 文あるだけでは数えない。
- 判定の基準は「人が普通のブラウザーで、ログインなしで読めるか」。機械の取得を拒む(403・429)だけなら読めた扱いにし、情報欄に「自動の取得は拒否」。
- 契約後にしか読めない=0・非提供(「契約後に公開」)。
B2 機械が読める仕様(20)
- ベンダーが公開する、対象の API の操作と、入力か出力の少なくとも一方の型を書いた定義(Postman だけは、表のとおり入力の例と応答の例)。公式の文書のリンク・ダウンロードの釦・文書の中に丸ごと埋め込まれた定義・文書のページが読み込む公式の仕様のファイル(目に見えるリンクが無くてもよい)から、ログインなしで取れる物。文書の中の型の断片(コードの例の一部)は数えない。取った場所と、確かめた操作の名前を記録する。URL を当て推量で作らない。形式の名前・ファイルの先頭・「Download」の表示だけでは点を入れない。
- 形式ごとの確かめ方(どれも「対象の操作」と「入力か出力の型」を確かめる):
| 形式 | 確かめる物 |
| OpenAPI 2.0/3.x | paths に対象の操作があり、引数か応答に型(schema)がある |
| GraphQL | 公開されたスキーマのファイル(SDL か introspection の結果)に型と操作がある。接続先に問い合わせて得ることはしない |
| Google の Discovery document | 操作(methods)と型(schemas)がある |
| WSDL(SOAP) | 操作と型の定義がある |
| gRPC の proto | サービスとメッセージの定義がある |
| RAML・API Blueprint・JSON Hyper-Schema | 操作(URL と方法)と型がある |
| AsyncAPI | 操作とメッセージの型がある。通知だけの仕様でも B2 は 20。ただしそれだけでは A1・B1 に点を入れない |
| Postman コレクション | ベンダーの名義で公開され、操作ごとに保存された入力の例と応答の例がある(型の代わりとして認める) |
| JSON の例・CSV の項目表だけ | 数えない |
B3 自分で始められる認証(20/10/0)
- 見るのは、対象のプランの利用者が、本番の接続に要る認証情報の一式を手に入れる道(試験用だけの鍵は B4)。自分の契約環境を操作するための物で判定する(外に配るアプリの審査は情報欄)。
- 20: 管理画面などで自分で発行できる手順が文書にある。
- 10: 申請先か申請の方法、または対象者にベンダーが手で渡す道が、文書に書いてある。本番用の鍵を得るのに申請や審査が要る時は、呼び名(本番申請・利用開始の審査など)を問わず 10。
- 0・非提供: 対象の利用者には渡さないと書いてある。
- 0・未確認: 対象者や道が分からない(探し終えても「無し」にせず「未確認」)。
- 「一般には開放していない」と「ベンダーが識別子を渡す」が両方書いてある時は、対象のプランの利用者が申請できる・渡してもらえると読める記述があるかで決める。あれば 10、無ければ 0・非提供。
- B3 は、文書で存在が確かめられる API の鍵についてだけ数える(B1 が「非提供=契約後に公開」でも、その API の鍵の発行手順が公開されていれば数える。API の存在が確かめられない時は「未確認」)。
- 製品そのものの契約が営業経由かは見ない。制限の理由の当否は採点しない。会社が文書で述べている理由は情報欄に書く。
B4 試験環境(10)
- 対象の API を試験に使えることと、本番と分かれた環境(別のテナント・別の接続先・テストモード)であることを、公式の資料の明記で確かめる。どちらかが書いていなければ「未確認」(推し量らない)。無料・有料・申し込み制・期限つき・固定の模擬応答だけ、の別は情報欄に書く。
- 「試用版」「検証環境」と呼ばれているだけで、API の試験に使えると書いていない時は「未確認」。
B5 公式の SDK か CLI(10)
- 対象の API の操作に使う、ベンダーの名義の SDK か CLI で、配り方が公式のページから案内されている。置き場と言語は問わない(公式の直接ダウンロード・公式のリポジトリを含む)。
- 数えない: 保守を終えた・archived と書かれた SDK や CLI(情報欄に書く)・表示だけの部品・別の製品のための開発道具(アプリを作る土台の CLI など)・クラウド全体の SDK で対象の API を操作できると書いていない物。
4. 状態と記録
- 1 項目=1 行。点のほかに状態を 5 つから選ぶ:
- 確認: 根拠で確かめた。
- 非提供: 提供していない・渡さないと会社が書いている。
- 無し: 「探し方の手順」の、その項目に必須の手順を全部終えて見つからない(MCP は E1〜E3 と M1〜M3、公開 API は E1〜E3 と 3 章)。途中の未読・取得の失敗がある時は「未確認」。
- 未確認: 証拠が足りない(開けない・あいまい・当てはまる範囲が分からない・探し方を終えていない)。
- 対象外: 規則の上で数えない項目(公開 API の道の A4 など)。
- 各行に残す物: 対象の条件/道か API の名前と版/根拠の URL/確かめた日時(UTC)/当の箇所の短い引用/点の理由/状態の理由。
- 機械で開けないページは、ブラウザーで描画して確かめる。読めた本文は手元に保存する。
- 文書の言語は問わない。読めない言語は翻訳して読む。
5. 等級・幅・バッジ・入口の区分
- 等級(物差しごと): AAA=90/AA=80〜89/A=70〜79/BBB=60〜69/BB=50〜59/B=40〜49/C=30〜39/D=30 未満。
- 入口の区分(製品ごと・等級より先に決める):
- 公開の入口なし: A1 と B1 がどちらも確定の 0(状態が「無し」か「非提供」)。もう 1 人の作業役が、探し方を全部やり直して同じ結果になった時だけ確定する(1 人の見落としで「入口なし」にしないため)。等級を付けず、別の一覧に出す。「契約後に公開」「リファレンスは非公開だが鍵の発行手順は公開」など、確かめた事実を添える。「接続口が無い」とは書かない。
- 入口を確認中: A1 か B1 に「未確認」が残り、確定の入口がまだ無い。等級を付けず、入口が確かめられた時の点の幅を添える。
- それ以外は等級を付ける。製品の入口の区分と、物差しごとの表示は分ける: A1 が確かめられていても、B1 が「無し・非提供」なら、B は等級を付けず「API の公開資料なし」。B1 が「未確認」なら、B は等級を付けず「API の入口を確認中」。どちらも、確かめた点と、計算できる参考の幅を添える(B3 だけの点で D とは出さない)。逆(B1 はあるが MCP が無い)は、A は公開 API の道で等級を付ける。
- 暫定の幅: 「未確認」の項目が取れた時に等級が変わりうる製品は、幅で出す。下限=候補ごとの確かめた点のうち最大。上限=記録した候補ごとに、分かっている事実と項目どうしの条件を守って未確認の所を満たした時の最大可能点を出し、その最大。違う道・違う API の項目を足し合わせない。上限に入れるのは「未確認」の項目だけ(「無し」「非提供」「対象外」は入れない)。
- バッジ(A 以上・物差しごと): 入口なし・確認中には出さない。それ以外は下限の等級で出し、幅がある時は「暫定」と明記する。物差し A は、採った道が公式の MCP(A1=50)の時だけ(第三者の MCP や公開 API の道で A 以上になっても、点と等級は出すがバッジは出さない)。物差し B は、確かめた B3 が 10 以上の時だけ。
- D は「等級が付く製品で 30 点未満」の意味にとどめ、項目ごとの状況を並べる。評価の言葉を使わない。
6. 基準日
- 2027-01-15 23:59(日本時間)の時点で公開されている事実で数える。締めの後に出た物は数えない(次の版)。
- 本番の採点の後、締めの時点を確かめられるように、全製品について根拠のページと探し先(Registry など)をもう一度確かめる。新しい公開・削除・提供の終了も調べる。確かめられない期間は「未確認」として残す。訂正の連絡が無い事は減点にしない。
7. 情報欄(点に入れない)
公式 MCP Registry の掲載/MCP の遠隔・手元の別/preview・beta/必要なプラン・地域/文書用の MCP/仲介型で接続できる/自動の取得は拒否/文書の言語/契約後に公開/申請・審査あり(会社が述べる理由)/試験環境の種類/仕様の形式/用途の札/提供者が第三者である事。
8. 夏(ARI Award 2026 Summer)との比較
- 夏の表は上書きしない。夏の点は横に出し、差を分ける: 事実が変わった/数え方を変えた/夏の判定を直した/対象の条件を変えた/判別できない。
- 数え方を変えた所: A4(遠隔の接続先も数える)・A2(API キーは送り方を問わず 10)・仲介型を点に入れない・入口の区分。
- 増減のすべてが、製品の改善・後退を表すわけではない、と書く。
9. 関係の開示と限界
- KanseiLINK・運営会社と関係のある会社(取引・無償の提供を受けた・運営者が利用者・問い合わせを受けた)を、関係の種類ごとに開示する。関係を加点の理由にしない。
- KanseiLINK は、採点の対象の会社から独立した第三者として採点します。採点・掲載・事実の訂正に費用はかからず、支払いの有無で等級は変わりません。採点の確認は、採点役とは別の確認役(どちらも AI)が行い、最終の判断は運営者が行います。
- 関係先からの異議は、内容と根拠を公開の記録に残す。
- 参加と訂正は無料。事実票は、連絡が届かない会社も請求すれば受け取れる。
- 限界: 公開資料だけで数える/資料に書いていない事は数えられない/候補は各業種の順位の上位で、業界全体の姿ではない/業種の中でも用途は一様でない/人手と予算の多い会社が取りやすい項目がある。
10. 本番の進め方(2 人で採点・裁定・判例集)
- 10.1 全製品を、互いを見ない 2 人の作業役が別々に採点する。同じ方法・同じ探し方・同じ対象の表を使う。作業の場所は作業役ごとに分ける。
- 10.2 2 人の結果を機械で突き合わせる。点・状態・採った道か API・入口の区分・幅の上下・等級・バッジのどれかが違う製品は、3 人目の確認役が根拠を開いて裁定する。2 人が一致した製品も、確認役が根拠の URL を開いて確かめる。
- 10.3 裁定は 1 件ずつ記録する(製品・項目・2 人の読み方・採った読み方・理由・当てた方法の文)。同じ形の製品には同じ裁定を当てる。記録には判例の番号と、当てた製品の一覧を付ける。記録は判例集として、方法と一緒に公開する。判例を足した・変えた時は、すでに採点した製品に当て直し、公開の前に全製品の等級・幅・バッジを計算し直して突き合わせる。
- 10.4 方法の文で決まらず、裁定でも根拠が足りない所は、点を入れずに「未確認」とし、暫定の幅で出す。方法の文を足す時は、版を上げ、すでに採点した製品に当て直す。
- 10.5 「公開の入口なし」は、2 人とも同じ結果の時だけ確定する。
- 10.6 試しの記録: 本番の前に、境目の例を集めた製品で二重採点を 2 回行った(24 製品で項目の一致 91%、うち難しい 13 製品をやり直して 96%)。食い違いの原因は方法の文に入れた。
- 10.7 KanseiLINK は、採点の対象の会社から独立した第三者として採点します。採点・掲載・事実の訂正に費用はかからず、支払いの有無で等級は変わりません。採点の確認は、採点役とは別の確認役(どちらも AI)が行い、最終の判断は運営者が行います。