直接上代码 ...

...

...

使用 Flume 监听整个目录的文件，并上传至 HDFS。 一、创建配置文件 flume-dir-hdfs.conf https://flume.apache.org/FlumeUserGuide.html#spooling-directory-source ...

实现代码如下： ...

有时候我们需要删除文件的某一行，来更新文件，在这我个人扩展了一个函数，以删除指定条件的行。 ...

转载自:https://www.cnblogs.com/testlearn/p/14426580.html ...

缘由:需要查询一下日志文件中的指定内容，但日志文件过大，需要减少无效查询量的业务场景 1. cat查找文件中的指定内容，并复制到新文件中进行查看 以上命令为查询error.log文件中, 出现'adam'的日志行。并将查询到的日志复制并新建到当前目录下的test.log文件 ...