针对共享资源的互斥访问历来是很多业务系统需要解决的问题。在分布式系统中，通常会采用分布式锁这一通用型解决方案。本文将就分布式锁的实现原理、技术选型以及阿里云存储的具体实践进行论述。
经过了前面几个小节的操作,现在我们手里已经有了爬虫.可以为我们爬取成堆的数据了，所以到了最后一步，是时候找个地方存放起来了，不然的话，数据就没法分析，数据本身的价值也就没了.而数据库作为当今最主要的数据存储工具，自然我们得了解一下.数据库是一种按照数据结构来组织、存储和管理数据的仓库.可以分成SQL数据库和NOSQL数据库.
在存储系统的设计中，存储引擎属于底层数据结构，直接决定了存储系统所能够提供的性能和功能。常见存储算法结构涵盖：哈希存储，B 、B+、B*树存储，LSM树存储引擎，R树，倒排索引，矩阵存储，对象与块，图结构存储等等。
BlockManager的作用？我理解是负责做RDD的存储，如何存下来给后续任务去使用。
相信大家对于 git 版本控制系统都不陌生，大部分同学在工作中都会使用到 git，他帮助我们管理我们的代码，让我们能够随心所欲的提交代码，进行不同的实验而不用担心将项目毁掉，同学们可以在工作中熟练的使用 git 进行代码提交，但是部分同学对于 rebase，merge 等等针对分支，合并的操作不十分自信，并且对目前腾讯视频客户端采用的主干开发模式背后的原理并不熟悉，在本文章中，我想通过介绍 git 的存储机制，来帮助大家更好的理解分支以及分支操作。
在前面章节中，我们已经从文件级别看了操作数据。在这章里，我们将从设备级别来考虑数据。Linux 有着令人惊奇的能力来处理存储设备，不管是物理设备，比如说硬盘，还是网络设备，或者是虚拟存储设备，像 RAID（独立磁盘冗余阵列)和 LVM（逻辑卷管理器）。然而，这不是一本关于系统管理的书籍，我们不会试图深入地覆盖整个主题。
在 MySQL 中，大字段是经常使用到的对象，例如：字符类型，包括日志、博客内容以及二进制类型的视频文件等。在 InnoDB 中，大字段也叫大对象（Large Object，简称 LOB），通常认为不会高频全量访问。
根据官网的介绍，Kafka是一个提供统一的、高吞吐、低延迟的，用来处理实时数据的流式平台
介绍了一款支持高并发的kv store，在单台机器上可实现1.6亿OPS的高吞吐，远胜于其它纯内存数据结构的性能。
在很久很久以前那个时代语言和文字还没出现人们的还都是通过“呜呜呜”的方式来进行沟通但是事情还是得记的因此“结绳记事”这种方法开始在人群里开始流行
Apache RocketMQ 自 2012 年开源以来，因其架构简单、业务功能丰富、具备极强的可扩展性等特点被广泛采用。RocketMQ 在阿里巴巴集团内部有着数千台的集群规模，每天十万亿消息流转的规模。在阿里云上，RocketMQ 的商业化产品也以弹性云服务的形式为全球数万个用户提供企业级的消息解决方案，被广泛应用于互联网、大数据、移动互联网、物联网等领域的业务场景，成为了业务开发的首选消息中间件。
随着 RocketMQ 5.1.0 的正式发布，多级存储作为 RocketMQ 一个新的独立模块到达了 Technical Preview 里程碑：允许用户将消息从本地磁盘卸载到其他更便宜的存储介质，可以用较低的成本延长消息保留时间。本文详细介绍 RocketMQ 多级存储设计与实现。
图片空间是淘宝智能图片中心面向商家提供的免费图片存储管理服务，由于淘宝、天猫主站上累积的用户图片数据量非常大（想想淘宝/天猫的商家和消费者每天要上传多少图片！），并且增长量惊人，图片空间业务面临着非常巨大的存储空间和写入性能压力。尤其每年双11之前，商家大量更新商品库存保有单位SKU（Stock keeping Unit），此时数据会急剧增长。
Docker 存储卷：容器服务在单节点的存储组织形式，关注数据存储、容器运行时的相关技术；K8s 存储卷：关注容器集群的存储编排，从应用使用存储的角度关注存储服务。
常见的分布式文件系统有，GFS、HDFS、Lustre 、Ceph 、GridFS 、mogileFS、TFS、FastDFS等。
从InnoDb 存储引擎的逻辑存储结构看，所有数据都被逻辑地存放在一个空间中，称之为表空间（tablespace）。表空间又由段（segment），区（extent），页（page）组成。页在一些文档中有时候也称为块（block）。
ClickHouse是最近比较火的一款开源列式存储分析型数据库，它最核心的特点就是极致存储压缩率和查询性能。从我个人的视角来看存储是决定一款数据库核心竞争力、适用场景的关键所在，所以接下来我会陆续推出一系列文章来分析ClickHouse中最重要的MergeTree存储内核。本文主旨在于介绍MergeTree的存储格式，并且彻底剖析MergeTree存储的极致检索性能。
关注时代Java
