会伴インデックス:ランキングの算出方法 (CP-I)

会伴インデックスは、収録しているすべての会議について算出する 0〜100 点のスコアです。このページでは算出方法をすべて公開しています:あらゆる要素、あらゆる重み、あらゆる対応表。非公開の部分はありません。誰でも自分で再計算でき、私たちが間違えたときに指摘できることこそが目的です。

アルゴリズム版 1.1 · スコア算出済みの会議 5,646 件 · ランキングを見る

なぜ独自の指標を作ったのか

CCF、ICORE、QUALIS は研究者が実際に引用する目録であり、私たちは 3 つとも転載しています。しかし 3 つ合わせても収録会議の約 5 分の 1 しかカバーしていません。およそ 5 件中 4 件は、3 つのランク列がすべて空欄です。そして判断の助けが最も必要なのは、まさにそうした会議です — CVPR がどの水準かは誰かに教わる必要がありません。この指標は、残る 80% について根拠のあることを言うために存在します。

このスコアではないもの

  • 査読による判断ではありません。論文を読むことも、研究者にアンケートを取ることもしていません。
  • CCF / ICORE / QUALIS と競合するものではありません。これらの目録が評価している会議では、そのランクがスコアの最大の入力です。
  • その会議が現在投稿を受け付けているかどうかを示すものではありません。それはランキングページの独立した絞り込み機能であり、意図的にスコアから外しています。
  • お金でスコアを変えることはできません。本サイトのどのリストでも掲載順位を購入する手段はありません。

5 つの要素

要素 重み 何を測るか
学術的評価 35% CCF / ICORE / QUALIS におけるこの会議の最上位ランク。私たちはこれらの目録を転載するだけで、独自に判断し直すことはしません。3 つのいずれにも載っていない会議は中立の基準値で評価され、減点はされません。
投稿の選択性 20% 投稿数と採択数の記録がある直近の開催回の平均採択率。
開催回数 20% 記録から確認できる開催回数。回次番号と、記録が残っている年の範囲から算出します。
コミュニティの注目度 10% 会伴上でこの会議をフォローしている、または過去 24 か月にページを開いた研究者の実数。これは私たち自身のコミュニティ(主に中国語で読む情報系の研究者)を測るものなので、重みを意図的に低く抑えています。
公開情報の充実度 15% 公開情報がどれだけ揃っているか:公式サイト、投稿募集の全文、採択率、最優秀論文の記録、過去の開催回、最新回が十分に新しいかどうか。これは資料の充実度を測るものであり学術的水準ではありません。認証された主催者が直接高められる唯一の要素であり、配点の大きい三項目 — 採択率・過去の開催回・最優秀論文 — はまさに主催者しか提供できないものです。

欠損データは中立の基準値で扱い、0 点にはしません

ほとんどの会議は少なくとも 1 つの要素が欠けています。要素が不明な場合は 100 点中 50 点(中立の基準値)として扱い、加点も減点もしません。そのうえでスコアの横に公開する信頼度を下げます。

別の 2 つのやり方は意図的に採用しませんでした。欠損を 0 点にすると、情報系以外のすべての会議を切り捨てることになります。CCF と ICORE は情報分野しか扱わず、QUALIS はブラジルの体系なので、「載っていない」ことは材料科学の会議について何の情報も持ちません。また「揃っている要素だけで正規化し直す」と、長く開催されている以外に何の記録もない会議が、実際に誰かに評価された会議と同じだけ高い点を得てしまいます。

多くの会議のスコアが 40〜50 に収まるのはこのためです。それは基準値が透けて見えているだけで、不合格の意味ではありません — 「その会議についてまだ多くを知らない」ということです。スコアは必ず信頼度と併せてお読みください。

正確な対応表

学術的評価

3 つの目録のうち最も高いランクを採用します。平均を取ると、より多くの目録に載っている会議が不利になります — CCF-A かつ ICORE B の会議が、CCF にしか載っていない会議より低くなってしまい、それは明らかに不合理です。

CCF A → 100 · B → 82 · C → 66
ICORE A* → 100 · A → 88 · B → 72 · C → 58
QUALIS A1 → 100 · A2 → 92 · B1 → 78 · B2 → 68 · B3 → 60 · B4 → 54 · B5 → 48

投稿の選択性

記録のある直近の開催回(最大 5 回)の採択率を平均します。投稿数 20 件以上の回のみを対象とします。採択率 12% 以下で 100 点、70% 以上で 30 点です。

下限は意図的に 0 にしていません。採択率が不明な場合は中立の 50 点になるため、高い採択率を公表すると 0 点になるのなら、数字を隠すほうが正直でいるより得になってしまいます。下限を現在の位置に置き、さらに採択率データ自体が公開情報の充実度にも算入されることで、見栄えのよくない採択率を公表しても総合点はおおむね増減しません。

開催回数

第 40 回で 100 点に達する対数曲線です。第 1 回と第 5 回の差は、第 36 回と第 40 回の差よりはるかに大きいからです。開催回数は、記録された回次番号、スナップショットを保持している過去の開催回数、記録が残っている年の範囲のうち最大のものを採ります。

コミュニティの注目度

人単位で重複を除いた 2 つの計数:その会議をフォローしている登録ユーザーと、過去 24 か月にページを開いた登録ユーザー。いずれも対数曲線で、それぞれフォロワー 300 人、閲覧者 400 人で上限に達します。

これは会伴コミュニティ内での注目度であり、情報系および中国語で読む研究者に偏っています。世界的な人気度ではありません。だからこそスコアの 15% を上限としています。会議ページに表示される閲覧数カウンターは使いません:あのカウンターは一度もリセットされておらず、クローラーも除外していないためです。

公開情報の充実度

保持している公開情報の各項目に点数を付けます。これは資料の充実度を測るものであり学術的水準ではありません。そして主催者が直接高められる唯一の要素です — 会議を認証申請し、欠けている情報を補うだけです。

  • 公式サイトあり — 10
  • 投稿募集の全文あり — 15
  • 採択率の記録あり — 30
  • 最優秀論文の記録あり — 15
  • 過去の開催回の記録あり — 20
  • 最新回が過去 24 か月以内 — 10

会議のスコアを上げるには

すべての入力はご自身で補えるものです。認証された主催者なら会議ページから数分でひととおり入力でき、スコアは毎晩再計算されます。以下の数値は現行アルゴリズム版での正確な加点で、採点コードと同じ定数から算出しています(手書きではありません)。

追加するもの 加点 なぜスコアが動くか
過去の採択率 最大 14.5 点 これが最も効果の大きい項目です。二つのことが同時に起こるからです:公開情報の充実度で 30 点分の価値があり、さらに「投稿の選択性」が不明(中立の基準値で採点)から実測値に変わります。採択率の低い会議は大きく上がり、採択率の高い会議も上がります — 決して下がりません。具体的には、採択率 20% なら 12.6 点、40% なら 7.7 点、80% でも 0.5 点です。
過去の開催回 3.0 点、それ以上になることも 公開情報の充実度で 20 点分の価値があります。多くの場合「開催回数」の項目も引き上げます:記録のある年の範囲から開催回数を数えるため、古い回を登録すると回次番号だけで示せるより長い実績を証明できます。「会議シリーズ」ページのデータ元でもあります。
最優秀論文の記録 2.3 点 受賞論文は、その会議が実際にどのような成果を発表しているかを示す最も明快な公開証拠です。本サイトの最優秀論文ページにも収録され、研究者と検索エンジンの双方から見つけてもらえます。
投稿募集の全文 2.3 点 リンクだけでなく、まとまった分量の投稿募集本文が必要です。ほとんどの会議はすでに持っているため、上の項目より配点は低くしています。

4 項目すべてを埋めると、通常 10〜20 点上がり、信頼度も 0.45 前後から 0.85 以上になります。信頼度はスコアと同じくらい重要です — 人も AI アシスタントも、引用するのは信頼度の高いスコアだからです。

手順:会議ページを開き、主催者として認証申請してください。採択率・過去の開催回・最優秀論文の入力欄がそのページに表示されます。未対応の項目は主催者ダッシュボードの ToDo にも一覧されます。会議を認証申請する

スコアが上がらない方法: 料金を支払う、広告を出す、あるいは直接依頼する。掲載順位に商業的な近道はありません。裏付けのないデータを入力するのも同様です — 採択率と過去の開催回はスコアのすぐ隣、会議ページ上で公開されるため、誰でもご自身の公式サイトと突き合わせて確認できます。

意図的に採用しなかったもの

  • 会議ページに表示される閲覧数カウンター。2013 年からすべてのアクセスを一度もリセットせずに数え続け、クローラーも除外していないため、それが測っているのはページが何回取得されたかであって、何人の研究者が関心を持っているかではありません。
  • その会議が休止しているように見えるかどうか。収録の約半数は過去 2 年間の開催記録がありませんが、それはたいてい会議が止まったからではなく、私たち自身のデータが古くなっているからです。私たちの更新の遅れを会議の減点にするのは不公平ですし、「その会議の評価はどうか」と「今も投稿できるか」という別々の問いを 1 つの数字に混ぜてしまい、どちらにも答えられなくなります。
  • 被引用数や書誌計量の指標。私たちはそのデータを保持しておらず、検証できない他所の数字を引用すればスコアは反証不可能になってしまいます。

既知の限界

  • 異なる分野の会議どうしを比べても意味があることはまれです。各会議ページの分野別順位をご覧ください。同じ研究分野タグを持つ会議の中での位置を示しています。
  • 採択率のカバー率は薄いです。投稿数と採択数の使えるデータがあるのは 10 件に 1 件未満なので、多くの会議では選択性の要素が基準値に戻ります。
  • コミュニティの注目度は、本サイトへの収録期間が長い会議、および利用者が携わる分野に偏ります。
  • 研究分野タグは会議名から自動で付与しているため、少数の会議が誤った分野のランキングに入ることがあります。お知らせいただければ修正します。

スコアが誤っている場合

すべてのスコアは会議ページで確認できるデータの関数なので、スコアが誤っているということは入力データが誤っているか欠けているということです。最も早い解決策は、主催者としてその会議を認証申請し、欠けている採択率・過去の開催回・投稿募集の全文をご自身で補うことです。スコアは毎日再計算されます。それ以外の問題は [email protected] まで、どの会議のどの要素かを添えてご連絡ください。

安定性

会議のスコアは、その入力データが変わったときにのみ変化します。順位は収録全体を一度に計算して保存するため、会議ページに表示される順位とランキング一覧での位置が食い違うことはありません。重みや対応表を変更するたびに、上に表示されているアルゴリズム版を 1 つ上げ、全件を再計算します。