この度、当社の推薦システム開発チームのメンバーが主著を務めた論文が、推薦システム分野のトップカンファレンス「RecSys 2025」にて、Full Paper採択されました。
「RecSys 2025」のメインカンファレンスで発表
本論文は、当社の推薦システム開発チームに所属する林悠大が主著を務め、合田周平氏、半熟仮想株式会社の齋藤優太氏と共同で執筆したものです。「マッチング市場におけるオフ方策評価と学習(原題:Off-Policy Evaluation and Learning for Matching Markets)」についての研究結果をまとめています。
今回採択された論文は、2025年9月にチェコ・プラハで開催される「RecSys 2025」のメインカンファレンスにおいて口頭発表を行います。
RecSysについて
「RecSys(ACM Conference on Recommender Systems)」は、米国計算機学会(ACM)が主催する、推薦システムに関する国際会議です。「KDD(※1)」「SIGIR(※2)」 などと並び、機械学習やデータサイエンスの分野において、権威のあるトップカンファレンスの一つとされています。
RecSysは毎年開催され、世界中の研究者やデータサイエンティスト、エンジニアが集い、推薦システムの分野における新しい研究成果の発表を行います。
※1)機械学習やデータマイニングをテーマとした論文の発表を行う国際会議。正式名称は「ACM SIGKDD Conference on Knowledge Discovery and Data Mining」※2) 米国の計算機学会の情報検索研究部会。正式名称は「Association for Computing Machinery's Special Interest Group on Information Retrieval」
背景
私たちが日常的に使っている求人アプリやマッチングアプリのようなマッチング型サービスでは、求職者と企業など「双方のユーザー同士の嗜好が一致すること」がマッチング成功の鍵になります。こうしたサービスでは、ユーザーの行動履歴などのデータを使って、どのユーザー同士の組み合わせがマッチングにつながるのかを予測する推薦アルゴリズムが活用されています。
新たに開発したアルゴリズムが本当に効果的かどうかを確かめるには、本来はA/Bテストと呼ばれる実サービス上での比較実験を行う必要があります。しかし、A/Bテストは時間やコストがかかることから、頻繁に実行することはできません。そこで注目されているのがオフ方策評価(Off-Policy Evaluation, OPE)です。これはすでに記録されている過去のデータのみを用いて、A/Bテストを行う前に、新しいアルゴリズムの性能を予測するための手法です。
しかしマッチングサービスは他の推薦システムとは異なり、ユーザー同士の双方向の嗜好が存在して初めてマッチングが成立するため、蓄積される成功データの数が限られます。そのため、オフ方策評価における従来手法では正確な性能予測が難しいという課題がありました。
論文の概要
本研究では、こうしたマッチングサービスの推薦システムにおける評価の難しさを解決するために、DiPSとDPRという新しい推定量を提案しました。これらは、これまで推薦システムの評価に用いられてきた典型的な推定量(直接法・逆傾向スコア法・二重頑健法)をベースにしつつも、マッチング市場特有の、片方からのみの嗜好が存在する状態を有効活用することで、成功データが限られる困難を回避できる手法です。
さらに、この手法はアルゴリズムの性能評価にとどまらず、より多くのマッチングにつながるよう推薦アルゴリズムを改良するオフ方策学習にも応用可能な汎用性を持ちます。
論文では理論的な解析に加えて、我々が過去に行ったA/Bテストのデータやシミュレーションデータを使った実験の結果も示し、提案手法が従来手法よりも正確な性能予測を可能にすることを報告しています。現場のデータにおいて有効性が示され、実装も容易であることから、実用性の高い研究成果となっています。
▼論文の詳細はこちら
