検索順位評価:MAP・MRR・NDCG
バグ・不具合を報告
順位付き検索結果を、二値関連性と段階的関連度の両面から比較する。
MAP・MRRは関連度1以上を「関連あり」とします。NDCGは0~4の段階的関連度をそのまま利得に使います。
各クエリで関連文書の判定集合が十分に揃っていることが前提です。未取得の関連文書を省くとMAPの分母とNDCGの理想値が変わります。
入力すると自動で計算します。Enterで次の項目へ進めます。次の入力欄を選んで進めます。
必要な入力・選択は3項目です。
計算結果
—
- MRR@k
- —
- 平均NDCG@k
- —
- 判定のあるクエリ数
- —件
- MAP・MRRの平均対象
- —件
- NDCGの平均対象
- —件
必要な値を入力すると自動で計算します。
この計算機は使いやすかったですか?
回答はサイト改善のために保存します。入力値・計算結果は送りません。
ありがとうございます。よかったら、上の共有ボタンからこの計算機を紹介しませんか?
計算方法・適用範囲・出典
計算方法
クエリqの関連文書総数をR_q、順位iの二値関連度をb_i(関連度≧1なら1)とすると、AP@k=Σ(i≦k, b_i=1)[(Σ(j≦i)b_j)/i]/R_q(R_q=0のとき0)。RR@k=k以内の最初の関連文書の順位rの逆数1/r、該当なしは0。DCG@k=Σ(i=1..k) grade_i/log₂(i+1)。IDCG@kは判定済み全関連度を降順に並べた同じ式。NDCG@k=DCG/IDCG(IDCG=0は算出不可)。MAPとMRRは指定方式のクエリ等重み平均、平均NDCGはIDCG>0のクエリのみの等重み平均。すべて無次元(0~1)。
MAP@k、MRR@k、平均NDCG@k、クエリ別AP/RR/NDCG・DCG/IDCG・関連文書数。
計算例(架空の数値)
架空例:クエリAの判定済み文書が順位1/関連度3、順位2/0、順位3/2、未取得/1、k=3ならAP@3=(1+2/3)/3=0.55555556、RR@3=1、DCG@3=4、IDCG@3=3+2/log₂3+1/2≈4.76186、NDCG@3≈0.8400。
適用対象と限界
関連度判定の母集団が把握でき、クエリごとに取得順位1からの連続したリストを用意できる検索評価。未判定文書の非関連扱い、関連度の自動推定、未収録の関連文書の補完、検索量やSEO順位の取得、統計的有意差検定は行わない。。
方法と出典
方法:NIST trec_eval m_map_cut.c / m_recip_rank.c / m_ndcg_cut.c(2026-11-13照合)、上位kでRRを打切る定義。データ記録日:2026-11-13。