Delta Lake基础操作和原理
目录 Delta Lake 特性 maven依赖 使用aws s3文件系统快速启动 基础表操作 merge操作 delta lake更改现有数据的具体过程 delta表schema 事务日志 ...
原文：Delta Lake基础操作和原理
Delta Lake 特性 支持ACID事务 可扩展的元数据处理 统一的流 批处理API接口 更新 删除数据，实时读写 读是读当前的最新快照 数据版本控制，根据需要查看历史数据快照，可回滚数据 自动处理schema变化，可修改表结构 maven依赖 因为要方便跑 demo，我这里选择用 spark shell 来交互式探索一下 Delta Lake 的功能。 按照文档介绍，Delta Lake 是 ...
2020-04-21 10:13 0 2003 推荐指数：
相关推荐
Delta Lake
重点问题 Delta Lake API 支持哪种类型的写操作？ Delta Lake 可以解决哪些 ...
Delta Lake源码分析
本文主要从代码的具体实现方面进行讲解，关于delta lake的事务日志原理，可以看这篇博客，讲解的很详 ...
Kudu、Hudi和Delta Lake的比较
目录 Kudu、Hudi和Delta Lake的比较 存储机制 读数据 更新数据 其他 如何选择合适的存储方案 Kudu、Hudi和Delta Lake的比较 kudu、hudi和delta lake ...
Delta Lake在Soul的应用实践
的数据湖架构，基于阿里云EMR的Delta Lake，我们进一步打造优化实时数仓结构，提升部分业务指标实 ...
delta lake minio+dremio 集成试用
参考集成模式 环境准备 基于docker 运行 spark 环境准备 ...
StructuredStreaming基础操作和窗口操作
一、流式DataFrames/Datasets的结构类型推断与划分 ◆ 默认情况下，基于文件源的结构化流要求必须指定schema，这种限制确保即 使在失败的情况下也会使用一致的模式来进行流查询 ...
Zookeeper Client基础操作和Java调用
## Zookeeper > Zookeeper目前用来做数据同步，再各个服务之前同步关键信息 i.客户端操作 1. 创建 create [-s] [-e] path data acl -s 为顺序节点 -e 为临时节点（临时节点在会话消失后即消失） acl为权限控制，权限控制比较 ...