标签：分布式

admin 8年前（2018-12-12） 5浏览

过去, Paxos一直是分布式协议的标准，但是Paxos难于理解，更难以实现，Google的分布式锁系统Chubby作为Paxos实现曾经遭遇到很多坑。 来自Stanford的新的分布式协议研究称为Raft，它是一个为真实世界应用建立的协议，主要注重...

admin 10年前（2016-04-02） 5浏览

Git是一款免费、开源的分布式版本控制系统，用于敏捷高效地处理任何或小或大的项目。一般来说，日常使用Git只要记住下图6个命令，就可以了。但是熟练使用，恐怕要记住60～100个命令。 下面是我整理的常用 Git 命令清单。几个专用名词的译名如下： W...

admin 11年前（2015-12-11） 4浏览

过去一直以为GlusterFS和GFS为同一个东西，真是惭愧。昨天一同事用到才发现它是个好东西！ 安装很简单，在所有存储服务器上执行： yum -y install glusterfs glusterfs-server chkconfig glust...

admin 11年前（2015-07-15） 5浏览

最近一直在忙着搞Ceph存储的优化和测试，看了各种资料，但是好像没有一篇文章把其中的方法论交代清楚，所以呢想在这里进行一下总结，很多内容并不是我原创，只是做一个总结。如果其中有任何的问题，欢迎各位喷我，以便我提高。 优化方法论 做任何事情还是要有个方...

admin 11年前（2015-04-14） 3浏览

在互联网行业工作的想必都多多少少听说过GitHub的大名，除了是最大的开源项目托管平台，许多企业也都是用GitHub来协同开发工作，当然我们彩程也是其中之一。笔者最初决定学习Git也是因为在团队内部设计方案初步被开发出来后，难免会有一些细节需要调整，...

admin 11年前（2015-04-07） 2浏览

1. 介绍 云硬盘是IaaS云平台的重要组成部分，云硬盘给虚拟机提供了持久的块存储设备。目前的AWS 的EBS(Elastic Block store)给Amazon的EC2实例提供了高可用高可靠的块级存储卷，EBS适合于一些需要访问块设备的应用，比...

admin 11年前（2015-04-05） 2浏览

一. 系统架构 Sheepdog的架构是完全对称的，没有中心控制节点，不存在单点问题，具有以下几点特性： Ÿ 性能和容量的现行扩展：当需要更大的容量时，sheepdog可以以线性增长方式简单的将新节点加入到集群中。 Ÿ 无单点故障：当有机器出问题时，...

admin 12年前（2015-03-16） 2浏览

FastDFS分布式存储实战 一、技术选型 普通存储方案：Rsync、DAS(IDE/SATA/SAS/SCSI 等 块)、NAS(NFS、CIFS、SAMBA 等 文件系统)、 SAN(FibreChannel, iSCSI, FoE 存储网络 块...

admin 12年前（2014-04-29） 1浏览

DRBD简介 DRBD (Distributed Replicated Block Device) 是 Linux 平台上的分散式储存系统。其中包含了核心模组，数个使用者 空间管理程式及 shell scripts，通常用于高可用性（high ava...

admin 13年前（2014-03-09） 3浏览

FastDFS是一个开源的轻量级分布式文件系统，由跟踪服务器（tracker server）、存储服务器（storage server）和客户端（client）三个部分组成，主要解决了海量数据存储问题，特别适合以中小文件（建议范围：4KB < ...

admin 13年前（2013-04-26） 0浏览

记得在zipsite项目中，对于文本文件本身就没有序列化的问题，但对于富媒体文件的序列化，我采用的方法是pickle。后来我忽然觉得使用pickle是可以实现简单的分布任务处理的。 废话不表，上代码： 首先是一个“有限事务机”，讲白一点就是所有的任务...

admin 16年前（2010-11-11） 1浏览

MooseFS 很不错，已经实用了半月了，易用，稳定，对小文件很高效。 MogileFS 据说对于 Web 2.0 应用存储图片啥的很好。 GlusterFS 感觉广告宣传做的比产品本身好。 OpenAFS/Coda 是很有特色的东西。 Lustre...

admin 17年前（2010-01-26） 2浏览

GFS(Google File System): http://www.codechina.org/doc/google/gfs-paper/ MogileFS: http://www.danga.com/mogilefs Hadoop/HDFS: ...