NiFi：ファイルから一定数のヘッダー行を削除する

Question

ファイルを処理しているので、データのみを保持するために最初のXヘッダー行を削除（トリム）して、正規表現の使用を避けることができます。

おかげ

Answer 1

あなたはNifiにExecuteScriptのまでプロセッサを用いて、第1のXヘッダー行を削除することができます。

import json 
import java.io 
from org.apache.commons.io import IOUtils 
from java.nio.charset import StandardCharsets 
from org.apache.nifi.processor.io import StreamCallback 

class PyStreamCallback(StreamCallback): 
    def __init__(self): 
     pass 
    def process(self, inputStream, outputStream): 
    text = IOUtils.readLines(inputStream, StandardCharsets.UTF_8) 
    for line in text[3:]: 
     outputStream.write(line + "\n") 

flowFile = session.get() 
if (flowFile != None): 
    flowFile = session.write(flowFile,PyStreamCallback()) 
    flowFile = session.putAttribute(flowFile, "filename", flowFile.getAttribute('filename').split('.')[0]+'_translated.json') 
    session.transfer(flowFile, REL_SUCCESS) 

をこれは明らかに最初の3行が削除されますが、あなたが簡単に多かれ少なかれ行を削除するためにそれを修正することができます。

次は私が自分自身のために書いた例Jythonスクリプトです。

希望に役立ちます。