私はそれがここに属していることを願っています。検索アプリケーションの効率を見積もる方法は？
誰でも、同じドメイン内で同じデータセットで作業しているさまざまな検索アプリケーションを比較する方法はありますか？
問題は非常に異なっています.1つは、アイテムがカテゴリにグループ化されているデータベースを検索するWebアプリケーションで、もう1つはキーワードで検索するリッチクライアントです。
この目的のための標準的なテスト項目はありますか？
テスト方法があります。たとえば、 「効率」を計算するレートを推定するために、精度/リコールまたはFベータメソッドを使用します。しかし、あなた自身でリファレンスセットを作る必要があります。つまり、ドメイン内の効率性、自分の推論と比較した効率性をどうにかして測定することになります。
さらに、参照セットが所有しているデータの代表であることを確認する必要があります。
ほとんどの場合、一般的な推論によって結果も得られます。
速度の問題でパフォーマンスを測定したい場合は、検索に対して想定されるクエリのセットを定式化し、検索エンジンにこれらを一定の割合で照会する必要があります。それはすべての一般的な読み込みツールで行うことができます。
いいえ、パフォーマンスは関係ありません。 Fスケールのおかげで、F2は私がここで必要としていると思います。 –
測定の調整パラメータとして 'beta'を使用できます。より高い値またはより低い値に設定すると、精度とリコールの重みが変わります。それはそれを顧客のニーズに合わせて調整することができます。 – fyr
はい、私は理解しています、私はそれについてのwiki記事をチェックしました、私が必要としているようです。私は数字を取得し、経営者に係数の決定をさせてくれると思う。 –