jq：3つのファイルを比較して、いずれかの識別子が見つからない場合

Question

3つのファイルがあります。 mongo.json,elastic.json,stripe.json。

それぞれにはクライアントの配列があり、それらの配列の長さを比較して、エラーを防ぐために同じ量の顧客を持っているかどうかを確認したいと思います。ここでは、各ファイルの例です：私は、各配列のな長さを取得し、次のコマンドで

Mongo.json

[{ 
    "_id": { 
      "$oid": "59c3942baeef22b03fa573d2" 
    }, 
    "client_id": "test@test.com", 
    "name": "Windows Client" 
},{ 
    "_id": { 
      "$oid": "59c3942baeef22b03fa573d2" 
    }, 
    "client_id": "test2@test2.com", 
    "name": "Linux Client" 
}] 

elastic.json

[ 
    { 
     "alias" : "test@test.com", 
     "index" : "index1", 
     "filter" : "-" 
    }, 
    { 
     "alias" : "test2@test2.com", 
     "index" : "index2", 
     "filter" : "-" 
    } 
] 

stripe.json

{ 
"object": "list", 
"data": [ 
    { 
     "id": "test@test.com", 
     "object": "customer", 
     "account_balance": 0, 
     "created": 1505990903 
    } 
] 
} 

は、私ドンchecのためにこれらのlengtsを比較する方法を知らない彼らは同じかでない場合Kは

jq '. | length' mongo.json elastic.json stripe.json 

結果：

2 
2 
1 

私は、これらの結果を比較することができますどのように？私は、次のような出力をしたいと思います：

Everyting is OK. 

反対の場合：場合

は、彼らが同じ長さを有し

Missing customer test2@test2.com 

顧客ID：は、電子メールです。

どうすればいいですか？

Answer 1

jq -n \ 
    --slurpfile mongo mongo.json \ 
    --slurpfile elastic elastic.json \ 
    --slurpfile stripe stripe.json \ 
' 
    [$mongo[][].client_id] as $mongo_ids 
| [$elastic[][].alias] as $elastic_ids 
| [$stripe[].data[].id] as $stripe_ids 
| (($mongo_ids + $elastic_ids + $stripe_ids) | unique) as $all_ids 
| {"missing_from_stripe": ($all_ids - $stripe_ids), 
    "missing_from_elastic": ($all_ids - $elastic_ids), 
    "missing_from_mongo": ($all_ids - $mongo_ids)} 
| [to_entries[] | select(.value|length > 0)] | from_entries 
' 

...正しく発する：

{ 
    "missing_from_stripe": [ 
    "test2@test2.com" 
    ] 
} 

Answer 2

これは可能ですか？

はい、両方のタスクを達成する方法はたくさんあります。おそらく、jqプログラム内で3つのファイルを別々に追跡するのが最も簡単でしょう。これもいくつかの方法で行うことができますが、私は '--argfile NAME FILENAME'オプションから始めることをお勧めします。

それはあなたが「顧客が」不足しているが、私はこのうまくいけば役に立つヒントを提供させている把握することによって何を意味するのか私にはすぐに明らかではない。そして、式（A、AとBの2つのJSON配列の場合

を - B）は、BにないAの項目を含む配列を出力します。

Answer 3

EDIT：この回答はLechucicoの前に書かれており、サンプルデータが簡素化され、オブジェクト間の関係が明確になりました。 Charlesが改訂された問題の良い解決策を提供して以来、以下は大事なものに過ぎません。

---

これを進める前に、データを理解する必要があります。上記フィルタがfilter.jqである場合は、レポートで

"__________________________________________________ mongo.json" 
, ($mongo[] | {client_id, name}) 

, "__________________________________________________ elastic.json" 
, ($elastic[] | {alias, index}) 

, "__________________________________________________ stripe.json" 
, ($stripe.data[] | {id, object}) 

を開始することができ、その後、コマンド

jq -Mnc \ 
    --argfile mongo mongo.json \ 
    --argfile elastic elastic.json \ 
    --argfile stripe stripe.json \ 
    -f filter.jq 

はそれはとてもこれらは、異なるタイプのオブジェクトであることをかなり明確だ

__________________________________________________ mongo.json 
{"client_id":"TEST","name":"Windows Client"} 
{"client_id":"TEST2","name":"Linux Client"} 
__________________________________________________ elastic.json 
{"alias":"living","index":"living_v1"} 
{"alias":"reindex","index":"living_v1"} 
__________________________________________________ stripe.json 
{"id":"cus_BRKuwUx0TS1LPL","object":"customer"} 

を生成しますそれらの間に明白な1対1の関係はないかもしれませんが、実際のデータとワークフローを調査すると、より意味のあるリンクを発見することができます。