OKAPI BM25パラメータの選択方法：bとk1

Question

私は実際にBM25式のbとk1の値を経験的に検証したり評価したりできますか？言い換えれば最も科学的な評価は何ですか？

このタイプの評価がどのように行われているかを見るために参照できる研究論文はありますか？

Answer 1

これらのBM25パラメータの最適値は、データ収集に大きく依存します。 Pluggable Similarity Algorithms | Elasticsearch

パラメータを調整する簡単な方法は、パラメータを調整し、パフォーマンスの影響を評価することです。結果が満足できない場合は、パラメータを再度変更して結果を評価します。 GeneticやACOのようなメタヒューリスティックなアルゴリズムで自動化することができます。

いくつかの論文でも使用できます。

• He, B., & Ounis, I. (2003, November). A study of parameter tuning for term frequency normalization.
• He, B., & Ounis, I. (2005, March). Term Frequency Normalisation Tuning for BM25 and DFR Models.