Ceph 分布式存储系统的构建与部署实践，ceph分布式存储实战

欧气 2025年03月29日 20:17 1 0

Ceph 是一种开源的分布式存储解决方案，以其高度可扩展性和高性能而闻名，本篇将详细介绍如何构建和部署一个基本的 Ceph 集群。

Ceph 是一个完全分布式的对象存储系统，它由三个主要组件组成：Ceph 存储集群（称为 "Raid"）、Ceph 存储服务器（称为 "OSD"）以及 Ceph 客户端，Ceph 可以用于多种用途，包括文件共享、块存储和网络对象存储等。

图片来源于网络，如有侵权联系删除

硬件准备

在开始之前，你需要准备至少三台服务器作为 OSD 节点，一台服务器作为 Monitor 节点，以及一台或多台服务器作为客户端，每台服务器的配置应该尽可能一致,以确保集群的高性能和稳定性。

确保所有服务器都已正确设置好网络连接，并且可以相互通信，确保每个节点都安装了必要的软件包，如 Python、Python-pip 等。

使用以下命令在一台服务器上启动 Ceph 的安装过程：

sudo apt-get update && sudo apt-get install -y ceph-common

这将安装所有必需的基础软件包,并为后续步骤做好准备。

Monitor 节点是 Ceph 集群的中心控制点，负责协调和管理整个集群的活动，我们需要为每个 Monitor 节点创建一个监听器端口和一个管理 IP 地址。

sudo ceph-deploy monitor add mon1 <monitor_ip>

这里 <monitor_ip> 是 Monitor 节点的管理 IP 地址，重复此步骤以添加更多的 Monitor 节点。

OSD 节点是实际的数据存储位置，每个 OSD 节点都需要有自己的磁盘空间来存放数据。

sudo ceph osd create --data /dev/sdb --pool default --name osd.0

这里 /dev/sdb 是 OSD 节点上用于存储数据的磁盘分区路径，你可以通过调整 --data 参数来指定不同的磁盘分区。

Client 节点是访问 Ceph 集群的用户界面，我们可以通过以下方式添加一个新的 Client 节点：

sudo ceph osd pool list

这将列出当前存在的池,你可以创建一个新的池并将其分配给特定的客户端：

Ceph 分布式存储系统的构建与部署实践，ceph分布式存储实战

图片来源于网络，如有侵权联系删除

sudo ceph osd pool create my_pool 128
sudo ceph osd pool set my_pool size 2

将这个池分配给某个客户端：

sudo ceph osd pool set my_pool client.0 allow_pool_creation

这样,客户端就可以创建和使用这个池了。

完成基本配置后，可以通过执行一些简单的操作来验证 Ceph 集群的正常运行状态。

可以使用 fio 工具对 Ceph 池进行读写测试,以评估其性能表现。

sudo fio --name=write_test --rw=randwrite --bs=4k --iodepth=64 --size=10G --runtime=60 --group_reporting

这段代码将在指定的池上进行随机写入测试，持续时间为 60 秒,你可以根据自己的需要进行相应的调整。

Ceph 提供了一个强大的 Web 管理界面，允许管理员监控和管理集群的状态，可以通过以下命令启动 Web 界面：

sudo cephadm shell

在这个 shell 中，你可以使用各种命令来管理和监控你的 Ceph 集群。

本文简要介绍了如何在多台服务器上构建一个基本的 Ceph 分布式存储系统，虽然这只是入门级的指南，但已经涵盖了从硬件准备到最终测试的关键步骤，在实际应用中，你可能需要根据具体需求进一步定制和完善你的 Ceph 集群，希望这篇文章能帮助你更好地理解和利用 Ceph 这一强大工具！