分布式存储 – 菜鸟小站-钱锅锅【BD4RPX】 https://www.cnzid.com 我是钱锅锅，我无所畏惧，我一生渴望被收藏好，妥善安放，细心保存。免我惊，免我苦，免我四下流离，免我无枝可依。 Thu, 12 Jun 2025 03:10:50 +0000 zh-Hans hourly 1 https://wordpress.org/?v=6.9.4 https://www.cnzid.com/wp-content/uploads/2026/01/微信图片_20260113222921_117_461-150x150.jpg 分布式存储 – 菜鸟小站-钱锅锅【BD4RPX】 https://www.cnzid.com 32 32 249684443 ceph rbd作为后端存储故障处理 https://www.cnzid.com/2025/06/12/ceph-rbd%e4%bd%9c%e4%b8%ba%e5%90%8e%e7%ab%af%e5%ad%98%e5%82%a8%e6%95%85%e9%9a%9c%e5%a4%84%e7%90%86/ Thu, 12 Jun 2025 03:10:40 +0000 https://www.cnzid.com/?p=1903 继续阅读“ceph rbd作为后端存储故障处理”]]> 当云服务器后端使用的是rbd方式对接云平台时，有时会遇到宿主机意外断电，停机或重启故障后，VM会报超级块（superblock）的问题导致VM的系统无法正常启动的处理办法：

原因：由于主机突然断电导致RBD锁住，VM无法启动，需要解锁。Ceph RBD的锁机制。当使用exclusive-lock特性时，RBD镜像会被客户端锁定，防止多个客户端同时写入导致数据损坏。突然断电可能导致锁未被正确释放，所以VM无法启动，因为锁仍然存在。

解决方法：

#查看镜像的锁信息（需指定池和镜像名称）
rbd lock ls <pool>/<image>

# 强制删除锁（需指定锁的ID）
rbd lock remove <pool>/<image> <lock-id> <client-id>

#实例：
rbd lock ls hdd_pool_01/abad99f9-50dd-4c8d-b595-0ff7f50cfa4d988  
rbd lock remove hdd_pool_01/abad99f9-50dd-4c8d-b595-0ff7f50cfa4d "auto 94778552067968" client.1264649449

]]> 1903 碧海分布式存储和Ceph的对比 https://www.cnzid.com/2022/11/28/%e7%a2%a7%e6%b5%b7%e5%88%86%e5%b8%83%e5%bc%8f%e5%ad%98%e5%82%a8%e5%92%8cceph%e7%9a%84%e5%af%b9%e6%af%94/ Mon, 28 Nov 2022 15:13:35 +0000 https://www.cnzid.com/?p=1770 继续阅读“碧海分布式存储和Ceph的对比”]]> 碧海分布式存储系统是依托于国内百年学府上海交通大学海量存储与安全实验室自主研发的分布式存储系统，起源于 2010年上海市科委“PB 级海量存储系统”重大项目。软件使用 C++语言编写，代码约 35 万行。
Ceph 是开源软件，目前由 Redhat 公司维护。使用 C++语言，代码逾百万行。国内公司的分布式软件定义存储产品大多都基于 Ceph。开源 Ceph 本身复杂性极高，存储厂商很难吃透并彻底掌握，通常只是跟随社区主导者的步伐发展，没有真正的核心技术，均面临如技术更新慢、稳定性不足、产品维护难等各种挑战；另外，开源模式并不意味着免费或低成本，往往导致更高的后期运维成本。
Ceph 在存储节点上为每块磁盘创建一个 OSD 进程，每个进程内多达 80 个线程，共有几百个线程，非常消耗 CPU 和内存资源，导致 IOPS 性能比较低。
碧海存储系统使用事件驱动模型，每个 CPU 启动一个 IO 进程，避免了进程/线程在 CPU 之间调度的开销。对 CPU 和内存要求低，性能更高。碧海分布式存储的 IOPS 性能达到业内领先水平，性能高于 EMC Scaleio、VMWare vSAN，是 Ceph 类产品所不具备的。
经实际测试，在硬件配置相同、存储介质为 SSD 时，碧海存储系统 IOPS 性能指标是 Ceph 的3 倍，而且 CPU 和内存开销更少。
对于碧海存储系统性能优化和稳定性的部分技术原理，可以参考学术报告：分布式存储系统的一些关键问题（https://mp.weixin.qq.com/s/OyGH9qTajcq0o4nsQPI63g）。

]]> 1770