南京云创存储科技有限公司的系统案例

0扬风0 2023-03-20 05:20

• 

  ___之最

  2023-03-20 06:00

  结构设计存储系统采用主备2个元数据服务器和19个存储节点构成，使用3U×6、2U×13标准上架机器，安装在3个标准42U机柜内。整个系统的结构如右图所示：***理节点即主元数据服务器节点和备份元数据服务器节点，支持主备双机热切换。元数据管理节点负责管理cStor云存储系统的卷，存储各文件的元数据信息，调度各数据存储服务器。每个3U的存储节点包含16块2T硬盘，每个2U的存储节点包含8块2T的硬盘，总容量共计6×32 + 13×16=400T。可靠性设计在cStor云存储系统中采用了下面两种可靠性保障机制，保证数据的安全可靠。1) 冗余备份在该项目中cStor采取的容错机制是通过1:1的冗余备份的方式实现云存储系统的可靠保证。备份因子可以根据服务的可靠性需求做动态的调整。服务启动后，自动为每个数据块做了一个备份副本。系统自动将源文件与副本存在不同的存储节点，实现了冗余备份。对于每一个chunk，必须将所有的副本全部写入成功，才视为成功写入。在其后的过程中，如果相关的副本出现丢失或不可恢复等状况，Master Server会自动将副本复制到其他Chunk Server上，从而满足高度可靠的需求。2) 分级动态存储方式cStor存储系统，采用了分级技术，把存储信息根据信息的重要性、访问频率等对信息进行了分级存储，将文件的元数据等访问频繁的重要信息时刻保持在线存储，开机后保存在内存中，可以随时读取和修改，以满足前端应用服务器或数据库对数据访问的速度要求。将其它备份数据、冗余容错的数据等访问量小的数据等采用廉价的SATA硬盘存储。对于访问量小的数据采用离线存储，一旦需要访问这些数据可以使用相应的唤醒策略来实现将离线转为在线。 按照总容量400T可用的用户要求，使用其他节点的2U-Chunk Server填充机柜，最终设计状态如下图所示：具体说明如下：1) J11机柜包含2台Master Server，6台3U-Chunk Server，一个24口Cisco千兆交换机；2) J12机柜包含8台2U- Chunk Server，一个24口Cisco千兆交换机；3) J13机柜包含8台2U- Chunk Server，一个24口Cisco千兆交换机；4) 每个千兆交换机连接本机柜内服务器，同时一个千兆接口连接到单位提供的万兆交换机，其中万兆交换机通过光口与单位的专网连接；5) 支持传统的冗余技术，副本个数可以采用1:1, 1:2, 1:3等冗余技术，且用户可以自行配置。J14、J15 、J16暂未使用（供数据中心扩容使用）。总的存储硬盘可扩展的数量为：16×6+38×8=400块。
  0 讨论(0)
  发布评论:

  提交评论

  ---

  •  加载中...