- 资源介绍
- 授权方式:开源软件
- 界面语言:简体中文
- 文件大小:5.09 MB
- 更新时间:2020-08-10
- 资源类型:国产软件
- 推荐等级:★★★☆☆
- 平台环境:C/C++
- 作者主页:点击查看
- 演示地址:点击查看
详细介绍 – [ curve分布式存储系统 v0.1.4 ]
curve分布式存储系统是网易开源的高性能、高可用、高可靠分布式存储系统,具有非常良好的扩展性。基于该存储底座可以打造适用于不同应用场景的存储系统,如块存储、对象存储、云原生数据库等。curve的设计开发始终围绕三个理念:一是顺应当前存储硬件设施发展趋势,做到软硬件结合打造顶级的存储产品;二是秉持“Simple Can be harder than complex”,了解问题本质情况下选择最简单的方案解决问题;三是拥抱开源,在充分调研的前提下使用优秀的开源项目组件,避免造轮子。
当前网易基于curve已经实现了高性能块存储系统,支持快照克隆和恢复 ,支持QEMU虚拟机和物理机NBD设备两种挂载方式, 在网易内部作为高性能云盘使用。
curve分布式存储系统特性
1、高性能
高性能是curve的一大特点,也是项目团队创建curve项目的初衷。RPC层面curve采用了高性能和低延迟并且已开源的brpc;在一致性层面选择了基于quorum机制并且开源的braft,从协议层面来说quorum机制在延迟方面天生优于多副本强一致的方式。实现上curve对braft快照的实现进行了优化,在状态机的实现上采用chunkfilepool的方式(初始化集群的时候格式化出指定比例的空间用作chunk)使得底层的写入放大为0;此外curve还在chunk上进行更细力度的地址空间hash以达到读写分离、减小IO碰撞等的效果,从而进一步提升IO性能。
2、高可用
高可用是curve的另一大特点。MDS、ChunkServer以及SnapShotCloneServer都支持多实例部署,部分实例异常不影响整个集群的可用性。
2.1、MDS
MDS是无状态的,推荐至少部署两个实例。通过Etcd进行选主。多个MDS实例通过Etcd进行选主,当单个实例失效时,可以秒级切换到另外一个实例。失效实例上正在处理的请求,Client和SnapShotCloneServer都会对其进行重试,以达到不影响集群可用性的效果。
2.2、SnapShotCloneServer
SnapShotCloneServer与MDS类似, 也是通过Etcd进行选主,不同的是,它通过负载均衡对外提供服务。失效期间的请求失败重试都是幂等的,不影响任务的正确性以及集群的可用性。
2.3、ChunkServer
ChunkServer是一个集群,通过Raft协议保持数据一致性,并通过MDS做负载均衡。单个节点失效时,会影响到这个节点上存储的所有Copyset。对于Copyset上的Leader节点,会中断服务,等待重新选举;对于Copyset上的follower节点,服务不会受影响。当某个Chunkserver节点失效且在一段时间内无法恢复,MDS会将其上的数据迁移到其他节点上。
相关阅读
同类推荐:站长常用源码
猜你喜欢
-
艺帆幼儿教育网站_儿童教育网源码 v1.7.5
2020-08-13 -
深度学习(jsp)alexa排名提升专家(utf-8) 1.0.1
2020-08-12 -
律师个人网站源码 v1.0
2020-08-14 -
启明星Appform员工请假系统 v27.0
2020-08-14 -
ECSHOP空包单号网交易源码 v1.0
2020-08-14 -
php采集天气预报 v1.0
2020-08-14 -
120急救指挥中心网络服务系统 v0.1
2020-08-14 -
FineCMS v5.3.0 bulid20180206
2020-08-14 -
紫忆产品防伪查询系统 V6.0
2020-08-13 -
查立得快搜系统(php+xls) v1.0
2020-08-14
-
闪灵Flash相册模块V1.0
2020-08-13 -
Emlog网址目录技术导航网模板 自适应PC+手机端_源码下载
2020-08-02 -
FOXPHP开源威客系统 v3.01
2020-08-14 -
商达讯企业网站系统完整免费版 v9.0
2020-08-13 -
迈云 ZunyX 文件分享系统 2010 Beta
2020-08-13 -
918天蓝型企业展示系统 v1.1
2020-08-13 -
恒浪威购商城系统(VgoShop) v2008sp1 Build 090426
2020-08-14 -
个人精美博客第一版
2020-08-13 -
F5在线HTML编辑器 v4.0 fro5.comF5
2020-08-15 -
信游网页游戏运营管理平台 v3.3
2020-08-14
猜你在找
2. 分享目的仅供大家学习和交流,您必须在下载后24小时内删除!
3. 不得使用于非法商业用途,不得违反国家法律。否则后果自负!
4. 本站提供的源码、模板、插件等等其他资源,都不包含技术服务请大家谅解!
5. 如有链接无法下载、失效或广告,请联系管理员处理!
6. 本站资源售价只是赞助,收取费用仅维持本站的日常运营所需!
源码资源库 » curve分布式存储系统 v0.1.4