万亿级KV存储架构与实践
一、KV 存储发展历程 我们第一代的分布式 KV 存储如下图左侧的架构所示，相信很多公司都经历过这个阶段。在客户端内做一致性哈希，在后端部署很多的 Memcached 实例，这样就实现了最基本的 KV 存储分布式设计。但这样的设计存在很明显的问题：比如在宕机摘除节点时，会丢数据，缓存空间不够 ...
原文：字节跳动自研强一致在线 KV &表格存储实践 - 上篇
背景 互联网产品中存在很多种类的数据，不同种类的数据对于存储系统的一致性，可用性，扩展性的要求是不同的。比如，金融 账号相关的数据对一致性要求比较高，社交类数据例如点赞对可用性要求比较高。还有一些大规模元数据存储场景，例如对象存储的索引层数据，对一致性，扩展性和可用性要求都比较高，这就需要底层存储系统在能够保证数据强一致的同时，也具有良好的扩展性。在数据模型上，有些数据比如关系，KV 模型足够用 ...
2020-06-07 18:38 0 819 推荐指数：
相关推荐
字节跳动如何实现产品体验的一致性？ArcoDesign给出了一部分答案
字节跳动如何实现产品体验的一致性？ArcoDesign给出了一部分答案 2021-10-28 09:16 ·人人都是产品经理 编辑导语：产品设计这一环节至关重要，它关乎到最终的用户使用体验。此时，若能降低设计和开发之间的沟通损耗，提升二者的协作效率，将可以有效保障产品落地后的用户 ...
字节跳动在 Go 网络库上的实践
https://mp.weixin.qq.com/s/wSaJYg-HqnYY4SdLA2Zzaw RPC 框架作为研发体系中重要的一环，承载了几乎所有的服务流量。本文将简单介绍字节跳动自研网络库 netpoll 的设计及实践；以及我们实际遇到的问题和解决思路，希望能为大家提供一些 ...
分布式事务解决方案2--TCC事务补偿实践(事务强一致方案)
1、创建SpringBoot工程 工程名为my-tcc-demo 依赖如下 2、数据准备 134和129分别在user_134创建account_a表， user_129 创建account_b表 account_a表和account_b表数据结构时一致 ...
基于raft一致性算法的分布式 KV service(PingCAP Tinykv)
Overview 通过一系列的project，来搭建起来一个基于raft 一致性算法的分布式键值存储 project1： 构建一个独立的 kv server（只有1个node) project2： 基于raft算法实现分布式键值服务器 -2a：实现基本的raft一致性算法，三个 ...
字节跳动入局在线教育：烧钱、亏钱
01-在线教育：3亿人的需求 ∨ 8月14日，字节跳动启动了一波校招，这次是给教育业务开的专场招聘。字节跳动今年在教育赛道招聘量很大，岗位涵盖教学教研、产品、市场等，基本上所有岗位都在招聘，可见字节对教育业务有多重视。3月，张一鸣在字节跳动8周年之际就提到未来三大发展重点：教育业务将是字节重点 ...
字节跳动 2019 春季算法实习生在线笔试
1. 题目一 求最少收到多少硬币，即优先用大面额的硬币找零，类似于求一个数的个位十位百位。 2. 题目二 先处理有连续三个字母的情况。遍历字符串，定义一个 cnt 变量， ...
字节跳动基于Apache Hudi构建EB级数据湖实践
来自字节跳动的管梓越同学一篇关于Apache Hudi在字节跳动推荐系统中EB级数据量实践的分享。 接下来将分为场景需求、设计选型、功能支持、性能调优、未来展望五部分介绍Hudi在字节跳动推荐系统中的实践。 在推荐系统中，我们在两个场景下使用数据湖 我们使用 ...