SwiftStack中Swift容量管理之如何实现平滑添加/删除存储

70次阅读
没有评论

共计 2690 个字符,预计需要花费 7 分钟才能阅读完成。

丸趣 TV 小编给大家分享一下 SwiftStack 中 Swift 容量管理之如何实现平滑添加 / 删除存储,希望大家阅读完这篇文章之后都有所收获,下面让我们一起去探讨吧!

SwiftStack 中 Swift Capacity Management  即 Swift 的容量管理,当在 Swift 服务器集群中

删除或者添加存储的时候,应该怎么做使得系统可以平滑过渡,而不会使得在执行删除或添加存储操作后服务

器的出现占用大量的 I / O 以及带宽,CPU 资源的问题。

添加存储:

一次性添加存储 – 傻瓜做法:

如果在运行 Swift 的时候添加 3TB 的硬盘存储,名称为 d16, 节点为 192.168.12.104

那么需要在 ring 中添加存储

$ swift-ring-builder account.builder add z1-192.168.12.104:6002/d16 3000

$ swift-ring-builder container.builder add z1-192.168.12.104:6001/d16 3000

$ swift-ring-builder object.builder add z1-192.168.12.104:6000/d16 3000

3000 为该存储在 ring 中的权重(weight),用存储的容量 (GB 作为单位) 作为权重是比较方便的做法。

Rebalance ring,并且把所有新的 ring.gz 重新传送到其他的存储服务器上

$ swift-ring-builder account.builder rebalance

$ swift-ring-builder container.builder rebalance

$ swift-ring-builder object.builder rebalance

Swift 执行了 ring 的修改,但是真的可以皆大欢喜了?

错! 这样做集群的性能将会急剧下降。即时添加 3TB 的存储,将会造成大量的数据在集群中传输。

Rebalance ring 意味着每个存储设备有相等的负载(根据权重)。如果集群中有 1.5T 的数据将会传送到新的设备中,

那么将导致 10GB 的以太网卡在接下的 20 分钟内达到 100% 使用率。整个系统的性能在数个小时内将惨不忍睹。

平滑添加存储 – 聪明的做法:

添加存储的时候把权重从小开始:3000-》25

$ swift-ring-builder account.builder add z1-192.168.12.104:6002/d16 25

$ swift-ring-builder container.builder add z1-192.168.12.104:6001/d16 25

$ swift-ring-builder object.builder add z1-192.168.12.104:6000/d16 25

$ scp account.ring.gz swift-node-1:/etc/swift/account.ring.gz

$ scp container.ring.gz swift-node-1:/etc/swift/container.ring.gz

$ scp account.ring.gz swift-node-1:/etc/swift/account.ring.gz

$ scp account.ring.gz swift-node-2:/etc/swift/account.ring.gz

$ scp container.ring.gz swift-node-2:/etc/swift/container.ring.gz

$ scp account.ring.gz swift-node-2:/etc/swift/account.ring.gz …

Rebalance ring,并传送 ring.gz 文件到集群中的所有存储服务器

$ swift-ring-builder account.builder rebalance

$ swift-ring-builder container.builder rebalance

$ swift-ring-builder object.builder rebalance

$ scp account.ring.gz swift-node-1:/etc/swift/account.ring.gz

$ scp container.ring.gz swift-node-1:/etc/swift/container.ring.gz

$ scp account.ring.gz swift-node-1:/etc/swift/account.ring.gz

$ scp account.ring.gz swift-node-2:/etc/swift/account.ring.gz

$ scp container.ring.gz swift-node-2:/etc/swift/container.ring.gz

$ scp account.ring.gz swift-node-2:/etc/swift/account.ring.gz …

等待一段时间后 (比如说一个小时) 重新设置该存储的权重(25- 50),再 reblance ring,再传送 ring.gz 到集群中的所有存储服务器

$ swift-ring-builder account.builder set_weight z1-192.168.12.104:6002/d16 50

$ swift-ring-builder container.builder set_weight z1-192.168.12.104:6001/d16 50

$ swift-ring-builder object.builder set_weight z1-192.168.12.104:6000/d16 50

$ swift-ring-builder account.builder rebalance

$ swift-ring-builder container.builder rebalance

$ swift-ring-builder object.builder rebalance

$ scp account.ring.gz …

不断重复,直到 120 个小时之后,权重变为 3000 了,设备添加就算是成功了。

当然,可以写通过脚本的方式省略大量的重复步骤!

删除存储

      方式和添加存储是一样的,把存储的权重逐步减少,每个小时或者固定的时间内重复步骤,直到权重变为 0。

这个时候要删除的存储就可以从服务器下架了。

看完了这篇文章,相信你对“SwiftStack 中 Swift 容量管理之如何实现平滑添加 / 删除存储”有了一定的了解,如果想了解更多相关知识,欢迎关注丸趣 TV 行业资讯频道,感谢各位的阅读!

正文完
 
丸趣
版权声明:本站原创文章,由 丸趣 2023-08-16发表,共计2690字。
转载说明:除特殊说明外本站除技术相关以外文章皆由网络搜集发布,转载请注明出处。
评论(没有评论)