Elasticsearchで `ignore_malformed`がトリガーされた文書を見つける

Question

Elasticsearchは、既存のタイプに適合しないフィールドにデータを挿入すると、デフォルトで例外をスローします。たとえば、フィールドが数値型として作成された場合、そのフィールドの文字列値を含むドキュメントを挿入するとエラーが発生します。

この動作は、ignore_malformedの設定を有効にすることで変更できます。つまり、このフィールドはインデックス作成の目的で黙って無視されますが、_source文書に保持されます。つまり、無効な値は検索または集計できません。返された文書。

これは、私たちのユースケースでは好ましい動作ですが、私たちは将来的にそれらを修正できるように、何らかの形でそのようなドキュメントを見つけることができるようにしたいと考えています。

不正なフィールドが無視されたドキュメントに何らかの理由でフラグを立てる方法はありますか？ドキュメントの挿入プロセスを完全に制御するので、すべての挿入フラグを変更するか、試用版などを使用して目標を達成することができます。

Answer 1

あなたはそこには、専用のメカニズムはいえませんので、この検索は、フィールドが意図的に設定されていないドキュメントを検索し

PUT foo 
{ 
    "mappings": { 
    "bar": { 
     "properties": { 
     "baz": { 
      "type": "integer", 
      "ignore_malformed": true 
     } 
     } 
    } 
    } 
} 

PUT foo/bar/1 
{ 
    "baz": "field" 
} 

GET foo/bar/_search 
{ 
    "query": { 
    "bool": { 
     "filter": { 
     "bool": { 
      "must_not": [ 
      { 
       "exists": { 
       "field": "baz" 
       } 
      } 
      ] 
     } 
     } 
    } 
    } 
} 

この例を参照して、このフィールドが存在しない文書を検索するためにexistsクエリを使用することができます