用nifi把hdfs數據導到hive


全景圖:

NewImage 

 

1. ListHDFS & FetchHDFS:

ListHDFS:

NewImage

 

FetchHDFS:

NewImage

 

2. EvaluateJsonPath:

{"status": {"code":500,"message":"FAILED","detail":"DTU ID not exists"}}

NewImage

如果json里有數組,需要先用SplitJson分隔:

NewImage

 

 

3. RouteOnContent:

NewImage

 

4. ReplaceText:

先在hive里創建一個表:

create table tb_test(
register string,
register_url string
);

 
NewImage
insert into yongli.tb_test(register, register_url)values('${register}','${register_url}')

 

5. PutHiveQL:

創建一個HiveConnectionPool

NewImage

 

設置Database Connection URL, User, Password:

NewImage


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM