云硬盘架构升级和性能提升

UCloud块存储研发工程师—叶恒云硬盘架构升级目标解决老架构不能充分使用后端硬件能力的弊端支持SSD云盘,提供QOS保证,可以用满后端NVME物理盘的IOPS和带宽性能,单个云盘可达2.
4WIOPS充分降低热点问题支持更大容量云盘(32T甚至更大)支持并发创建几千块云盘,支持并发挂载几千块云盘支持老架构云盘在线向新架构迁移,支持普通云盘在线迁移至SSD云盘IO路径优化IO路径优化proxy负责IO的路由获取,以及缓存proxy负责IO的读写转发到下一层存储层proxy负责IO写三份复制client负责IO的路由获取,以及缓存client负责IO的读写发送到主chunk主chunk负责IO写的三份复制1.
读IO,一次网络请求直达到后端存储节点,老架构都是2次.
2.
写IO,主副本IO一次网络请求直达后端存储节点,另外2副本经过主副本,经历两次网络转发,老架构三个副本均为两次3.
读IO时延平均降低0.
2-1ms,写尾部时延减低,有效的降低时延.
分布式存储中,会将数据进行分片,从而将每个分片按多副本打散存储于集群中例如一个200G的云盘,如果分片大小是1G,则有200个分片.
元数据优化分片大小应该选择多大1G2G1M4M元数据优化老架构中,分片大小是1G,新架构中,我们支持了1M大小的分片部分业务IO热点范围局部在较小范围内,如果1G分片,普通SATA磁盘性能会很差.
而1M分片,可以充分使用整个集群的能力.