1.1 高吞吐性
时间:2022-03-05 00:34:01 | 来源:行业动态
时间:2022-03-05 00:34:01 来源:行业动态
OSS的底层存储充分利用各组件的性能优势,来使整个集群可以达到较高的吞吐量。
HBase(Hadoop Database),是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统,利用HBase技术可在廉价PCServer上搭建起大规模结构化存储集群。对于小于1MB的文件写入HBase是一个很棒的设计。
那么大于1MB的文件,我们存入哪里呢?有这么几种方案可供我们选择,比如Hadoop,FastDFS,Ceph等组件。我们最终选择了Ceph做大文件存储。
Ceph是一种为优秀的性能、可靠性和可扩展性而设计的统一的、分布式文件系统。Ceph的开发目标可以简单定义为以下三项:
1.可轻松扩展到数PB容量
2. 支持多种工作负载的高性能
3. 高可靠性