中亚联邦私有云存储系统 .ppt

系统优势 高性能 高可靠性 高扩展性 易管理 高兼容性 自身优势 高性能：高聚合带宽 FedStore 集群存储系统 高速网络 聚合带宽 文件切片分布式存储 … … 高性能：聚合带宽 测试环境 网络环境：Infiniband网络 硬件环境：20台存储服务器（12块SATA盘），20台客户端性能测试 实施效果 高性能：近线性增长 聚合带宽随着存储集群规模的扩大而线性增长； 充分发挥硬件性能，如网卡性能利用率高于80%； 扩展到数百GB/S以上的聚合性能； 单目录下高达千万级的文件，单一文件系统文件数量支持超过两千亿； 单个共享文件系统支持300PB级； 提供高达数百GB/S的IO带宽和高效文件检索效率； 高可靠性：无单点故障 为不同目录的数据设置不同的冗余度 自动故障探测与恢复 设备恢复速度是RAID的5倍， 3TB SATA盘恢复时间20分钟内 元数据服务器每两台互备，无单点故障 … 存储服务器 文件 A Segment 1 Segment 2 校验数据 … 恢复数据 损坏的磁盘自动被剔除出系统 高可靠性：无单点故障 元数据采用集群架构 存储系统中的索引由各台元数据独立管理 存储系统索引层 高可靠性：后端存储池高效数据保护 应用服务器 千兆/万兆以太网 FedStore共享存储池 存储服务器集群 元数据服务器集群 … … … … OK！ 磁盘损坏 存储服务器宕机 网络中断 元数据服务器宕机 高扩展性：不停业务扩展容量 通过手动数据恢复以及负载均衡功能，完全可实现在线更换存储系统中所有老旧设备、在线快速扩展系统容量、在线扩展IO带宽； 高扩展性：横向扩展容量与性能 用户组C 用户组D 用户组A …… 用户 组 KFS共享存储池 存储池整体聚合带宽 用户组B …… …… 应用增加，存储容量与性能需求提升 应用再次增加 完全在线扩展，按需增加存储容量和访问带宽，有效降低初期投入成本 高扩展性：支撑文件数量与检索效率 我的存储系统也可以存放海量文件，我打开给你看看 结果：半小时过去了， 文件夹依然没有打开 文件检索效率已成为存储系统的重要考量标准 保证每台元数据每秒fopen2万文件 大文件 小文件 存储海量文件数量 横向扩展检索能力 分级存储机制 高性能应用 在线应用 备份应用 高速硬盘组 企业硬盘组 备份硬盘组 分级存储机制，将内部存储介质按需分组，为不同性能需求的业务提供存储服务 易管理：单点配置管理 单点实现所有管理配置功能 内置各种自动处理流程，减少人为参与 系统优势 对比优势 与SAN解决方案对比 与SAN方案测试结果对比 与集群NAS方案对比 与集群NAS方案对比 应用服务器 磁盘阵列 NAS控制器 潜在热点 应用服务器 存储服务器 集群NAS Fedstore中亚联邦安全 元数据服务器 集群NAS的文件一致性靠NAS控制节点来保证，所以要不间断的同步NAS控制器，致使控制器存在数量限制 Fedstore中亚联邦安全靠元数据来保持文件的一致性的，所以元数据的同步对存储系统的容量和整体性能无影响 与SAN解决方案对比 高速IP网络 存储服务器集群 元数据服务器集群 SAN解决方案 Fedstore中亚联邦安全解决方案 … VS 高性能集群计算节点 FC网络 高速IP网络 MDC 磁盘阵列 I/O服务器 高性能集群计算节点 与SAN方案测试结果对比 方案 SAN+SAN FS Fedstore中亚联邦安全 硬件配置 32个高端8GB FC控制器器； 512块FC磁盘； 267块SATA磁盘 写性能 1.87 GB/s 4.67 GB/s 读性能 2.42 GB/s 4.24GB/s 备注：测试环境超过500个计算节点 特色总结 企业网盘 网盘客户端 权限控制 行为审计 三员管理 在线预览 版本控制 外链分享 锁定编辑 移动办公 可定制化 ... ... 集群存储 可提供数百GB/s的聚合带宽 总空间可扩容至300PB以上 文件数量总量可支持2000亿以上 高速恢复 低运维量 线性扩容增长 支持分级存储 各应用冗余数量可调 完全基于POSIX接口开发，无需二次开发 ... ... ＋ 成功案例 国家发改委 海南省政府 国家广告产业园 广州海关 广东海事局 浙江省发改委 北大光华管理学院 长江商学院 厦门大学 中国广播电影电视设计研究院 北京市建筑设计研究院 ... ... 海南航空（包括下属322家子公司） 用友软件 台州银行 红塔证券 浙商证券 新华保险 大地保险 大庆油田电力集团 中石化河南分公司