服务器端（.net webapi） ...

最近有个思路。想要监控本地文件变化 并上传到指定服务器。 刚开始有这个想法的时候找了很多资料。关于 windows 和linux 上怎么监控文件变化的 最后选择了 比较MD5值的方法。 我也写了一段 但是也大同小异。 于是 其中借用了别人的代码 他的github 是 https ...

hdfs dfs -put 从本地上传到hdfs上出现异常 与namenode 同台机器的datanode错误日志信息如下： 2015-12-03 09:54:03,083 ...

这里，记录一下比较常用的docker操作细节，对于初次使用者，可能有很大的帮助。 docker作为云计算Paas层面的东西，风靡全世界了，主要是因为它小巧，好用，功能强大。今天主要介绍一下如何 ...

在做测试数据时，往往会有ftp数据上传到hdfs的需求，一般需要手动操作，这样做太费事，于是有了下边代码实现的方式： ftp数据上传到hdfs函数： main调用函数： 使用yarn jar提交： ...

案例1：开发shell采集脚本 1.点击流日志每天都10T，在业务应用服务器上，需要准实时上传至数据仓库（Hadoop HDFS）上 2.一般上传文件都是在凌晨24点操作，由于很多种类的业务数据都要在晚上进行传输，为了减轻服务器的压力，避开高峰期。 如果需要伪实时的上传，则采用定时上传的方式 ...

当使用 hadoop fs -put localfile /user/xxx 时提示： put: Permission denied: user=root, access=WRITE, inode="/user/shijin":hdfs:supergroup:drwxr-xr-x 表明：权限 ...

　　随着手机的拍照像素越来越高，导致图片赞的容量越来越大，如果上传多张图片不进行压缩、质量处理很容易出现OOM内存泄漏问题。 　　最近做了一个项目，向webservices上传多张照片，但是项目部署出来就会出现闪退现象，后来经行调试发现图片没有进行压缩，一张图片大小为2M ...