直接上代碼 ...

...

...

使用 Flume 監聽整個目錄的文件，並上傳至 HDFS。 一、創建配置文件 flume-dir-hdfs.conf https://flume.apache.org/FlumeUserGuide.html#spooling-directory-source ...

實現代碼如下： ...

有時候我們需要刪除文件的某一行，來更新文件，在這我個人擴展了一個函數，以刪除指定條件的行。 ...

轉載自:https://www.cnblogs.com/testlearn/p/14426580.html ...

緣由:需要查詢一下日志文件中的指定內容，但日志文件過大，需要減少無效查詢量的業務場景 1. cat查找文件中的指定內容，並復制到新文件中進行查看 以上命令為查詢error.log文件中, 出現'adam'的日志行。並將查詢到的日志復制並新建到當前目錄下的test.log文件 ...