をフィルタリング私はすべての変換は、列ベースの変換であることに気づい読み取ります。 値ベースのフィルタリングが必要なユースケースがあります。たとえば:カフカ接続(単一メッセージ変換)行が
は、人々のグループの次のデータセットを検討してください。
{"firstName": "FirstName1", "lastName": "LastName1", "age": 30}
{"firstName": "FirstName2", "lastName": "LastName2", "age": 30}
{"firstName": "FirstName3", "lastName": "LastName1", "age": 60}
{"firstName": "FirstName4", "lastName": "LastName2", "age": 60}
私はlastNameのあるLastName2
これらすべてのレコードをフィルタするための私の労働者はカフカ-接続またはI使用して、それは可能ですしたいですこのユースケースのために別のプログラムを書く必要があります。
おかげ
は同じでした。私は、私のためにタスクを実行した行フィルタ変換を書きました。ありがとう。 – afsd