ZStack Ceph 企业版分布式存储系统软件安装手册 ZStack Ceph 企业版分布式存储系统软件安装手册
2021-07-01 15:53:42
1.16MB
1
对网易数帆开源的新一代分布式存储Curve做一个总体的介绍，包括：
Curve出现的背景，为什么不基于已有的存储改造或直接使用已有存储，而是从0到1开发Curve。
Curve的总体设计，主要介绍软件基本架构，数据的组织形式，拓扑结构，以及总体的IO流程，其中IO的细节将在后面的系列讲座中介绍。
Curve的系统特性，主要介绍Curve在高性能(包括当前最新版本v1.1.0-beta的测试数据)、高可用、自治、易运维、高质量这几个方面是如何体现的以及它们的一些关键实现方式。
最后会说明下Curve的近期规划，期待感兴趣的小伙伴加入我们。
2021-04-30 22:55:56
2.03MB
1
源码简介与安装说明：
Alluxio（以前称为Tachyon）是一个虚拟的分布式存储系统。它弥合了计算框架和存储系统之间的鸿沟，使计算应用程序可以通过公共接口连接到众多存储系统。Alluxio项目源自加州大学伯克利分校AMPLab的一个名为Tachyon的研究项目，该项目是伯克利数据分析堆栈（BDAS）的数据层。
Alluxio大数据存储系统的功能：
1、灵活的文件API：Alluxio的本地API类似于java.io.File类，提供了 InputStream和OutputStream的接口和对内存映射I/O的高效支持。我们推荐使用这套API以获得Alluxio的完整功能以及最佳性能。
2、兼容Hadoop HDFS的文件系统接口:基于这套接口Hadoop MapReduce和Spark可以使用Alluxio代替HDFS。
3、可插拔的底层存储：Alluxio支持将内存数据持久化到底层存储系统。Alluxio提供了通用接口以简化对接不同的底层存储系统。目前Alluxio支持Microsoft Azure Blob Store，Amazon S3，Google Cloud Storage，OpenStack Swift，GlusterFS， HDFS，MaprFS，Ceph，NFS，Alibaba OSS，Minio以及单节点本地文件系统，后续也会支持更多其他存储系统。
4、Alluxio层级存储：Alluxio可以管理内存和本地存储如SSD和HDD，以加速数据访问。如果需要更细粒度的控制，分层存储功能可以用于自动化管理不同层之间的数据，确保热数据在更快的存储层上。自定义策略可以方便地应用到Alluxio，而且pin(钉住)的概念允许用户显式地控制数据的存放位置。
5、统一命名空间：Alluxio可以通过挂载功能实现不同存储系统之间的高效数据管理。并且，透明命名机制在持久化存储对象到底层存储系统时可以保留存储对象的文件名和目录层次结构。
6、Web UI：用户可以通过Web UI浏览文件系统。在调试模式下，管理员还可以查看每一个文件的详细信息，包括存放位置，检查点路径等。
7、命令行：用户也可以通过./bin/alluxio fs与Alluxio交互，例如：实现将数据从文件系统拷入拷出。
2021-04-18 21:00:12
14.50MB
这是最新的HBase书籍，其他的几个都是还在0.8版本的，2018年11月出版，自己扫面的，页面高清书签精准，制作不易。内容很新，HBASE的版本是1.4.0。分为8大章，第一章 Hbase介绍 第二章 Hbase模型和系统架构 第三章 Hbase数据读写流程 第四章 Hbase环境搭建 第五章 Hbase Shell 第六章 Hbase程序开发 第七章 Hbase高级特性 第八章 MapReduce ON Hbase
2021-01-11 17:29:04
120.76MB
1