Flink-1.10.0中的readTextFile解读 最近在学习Flink,研究了一些东西,在准备自定义一个简单的监听文件的source作为练手的时候,遇到了一个问题。就是应该如何在自己的source中决定哪个分区读取哪个文件?学习过spark的我们知道,source会被切分,然后每个分区 ...
本来想cdh集成flink,但是我的cdh版本为 . . ,参考了下面的issue可能cdh版本太低,至少要cdh https: github.com pkeropen flink parcel issues 进行独立安装 wget https: mirrors.tuna.tsinghua.edu.cn apache flink flink . . flink . . bin scala . .t ...
2020-03-10 22:16 0 1524 推荐指数:
Flink-1.10.0中的readTextFile解读 最近在学习Flink,研究了一些东西,在准备自定义一个简单的监听文件的source作为练手的时候,遇到了一个问题。就是应该如何在自己的source中决定哪个分区读取哪个文件?学习过spark的我们知道,source会被切分,然后每个分区 ...
【背景】 好几年没搞Hadoop了,最近需要用Flink,打算搞一搞Flink On Yarn。 下面这篇是几年前安装HBase的笔记,也包含了Hadoop的安装。 https://www.cnblogs.com/quchunhui/p/7411389.html 这次打算都选择最新的版本 ...
一、下载相关的依赖库 pcre 下载地址 http://120.52.73.43/jaist.dl.sourceforge.net/project/pcre/pcre/8.38/pcre-8.38. ...
在ubuntu16.04上安装eclipse 一、下载 首先我们需要安装jdk1.8及其以上,然后从官网:https://www.eclipse.org/downloads/上下载,需要注意的是官网的服务器太差,响应的速度非常慢,需要读者有点耐心,哈哈~~~然后选择第一个 ...
原本安装的是Ubuntu14,但是在使用caffe时总是出错,所以干脆将Ubuntu从14升级到16,结果整出一堆麻烦。在解决这些麻烦的过程也学习了不少系统启动的细节。印证了那句话“如何没有装过十遍以上的系统就不能说学会了linux”。那么这是我的第二遍了,我也准备迎接剩下的八遍了。 下面我会 ...
ubuntu16.04安装Grafana 1.在Grafana官网查看最新版本。 2.输入以下命令,执行安装。 wget https://s3-us-west-2.amazonaws.com/grafana-releases/release/grafana_5.1.3_amd64.deb ...
gcc、g++依赖库 安装 pcre依赖库(http://www.pcre.org/) 或源码安装: 安装 zlib依赖库(http://www.zlib.net) 或源码安装 安装ssl依赖库(ubuntu16.04 ...
1.要求vim的版本在7.4.143以上,支持python2/3,通过vim --version查看。 2.下载源码: https://github.com/Valloric/YouCompleteMe#ubuntu-linux-x64 3.安装Cmake: 4.确保安装 ...