paint-brush
在虚拟化环境中部署 MinIO 所需了解的一切经过@minio
6,938 讀數
6,938 讀數

在虚拟化环境中部署 MinIO 所需了解的一切

经过 MinIO4m2023/10/25
Read on Terminal Reader

太長; 讀書

在虚拟化环境中部署 MinIO 时,确保具备适当的条件非常重要
featured image - 在虚拟化环境中部署 MinIO 所需了解的一切
MinIO HackerNoon profile picture


虚拟化数据中心为企业提供软件定义的基础设施——服务器、存储、网络——从而实现云的运营效率和灵活性。软件与硬件的解耦使 IT 能够灵活地在共享基础设施资源池上运行多个工作负载。虚拟化为企业提供了不断创新来实现业务目标的方法,而不是投入资源来维护严格配置的服务器场。虚拟化可实现自动化和编排,消除管理底层基础设施的负担,加快服务交付速度,同时降低运营费用。


出于多种原因,客户在虚拟化环境中使用 MinIO。首先,MinIO 用于将云原生对象存储引入软件定义的数据中心。这是在虚拟化环境中部署 MinIO 对象存储的主要用例。我们的企业客户通常运行VMware vSphere ,但这些技巧适用于任何虚拟机管理程序。


这篇博文重点介绍在虚拟化环境中部署 MinIO 的最佳实践。这些建议旨在作为一个起点,帮助您确保将 MinIO 安装到配置为提供预期性能和耐用性保证的环境中。

部署指南

在虚拟化环境中部署 MinIO 时,确保具备适当的条件以充分利用 MinIO 非常重要。 MinIO 是一个高性能系统,部署在 32 节点集群上时,聚合速度可达 1.32 Tbps PUT 和 2.6 Tbps GET。确保遵守组织在虚拟化环境中部署高性能应用程序的最佳实践。


避免“吵闹的邻居”问题。为了充分利用 MinIO,它应该是虚拟机管理程序上运行的唯一工作负载,就像在虚拟化环境中对任何高性能系统所做的那样。这将防止工作负载在其他虚拟机上运行时消耗资源而导致性能损失。


适当地配置网络。确保有(超过)足够的以太网交换机带宽来满足您计划使用 MinIO 运行的应用程序的要求。您可以使用mperf这样的简单工具来测试。您可以使用全面的WARP 基准测试工具来查看 MinIO 集群在各种工作负载下的表现。


确保可用性。每个 MinIO VM 都应在其自己的专用虚拟机管理程序上运行。 MinIO 使用纠删码来确保数据的可用性和持久性。您可以使用这个方便的工具了解 MinIO 如何通过纠删码处理磁盘或节点的丢失。在同一个虚拟机管理程序上拥有给定集群的多个虚拟机会带来单个虚拟机管理程序关闭超出预期数量的集群的风险,这可能会影响 MinIO 提供的 HA 和持久性保证。


消除人为瓶颈。为了获得最佳性能,MinIO 需要本地磁盘来支持要求苛刻的工作负载。因此,您不应该在提供自身耐久性的其他系统之上运行 MinIO。这是不必要的,因为 MinIO 中保存的数据是纠删码的,并且使用其自己的持久性方法运行其他系统会产生人为瓶颈。此类系统的示例包括 RAID、LVM 或 ZFS 池。不要在分布式文件系统(例如 NFS、GlusterFS、GPFS 等)之上运行 MinIO。不要在精简磁盘上运行 MinIO。目标是降低复杂性和潜在瓶颈,并最大限度地提高性能。例如,您可以在 SAN 磁盘上运行 MinIO,但这会增加额外的复杂性,并使跨共享存储强制执行性能要求变得困难。


准备虚拟机。如果您的虚拟机管理程序提供来宾优化,请确保安装最新版本(例如 VMware Tools),以确保您充分利用虚拟硬件的功能。

部署要求

MinIO 对 CPU 和 RAM 的要求较轻。该软件几乎可以在任何硬件上运行,因此在正确配置后非常适合虚拟化环境。


MinIO 性能的唯一限制是 I/O,这意味着读取和写入的速度只能与底层 I/O 系统(即驱动器、控制器或网络等)一样快。基准测试已多次证明 MinIO 是网络绑定的,仅受限制通过可用带宽。理想情况下,在 MinIO 上运行的工作负载也应该受到网络限制。


对于纯粹的功能测试,MinIO 可以在像 Raspberry Pi 这样的轻型硬件上运行。因此,即使是规格非常低的虚拟机也可以工作。这对于想要学习和尝试便携式 S3 兼容对象存储的人很有帮助,但对于生产来说不是正确的选择。


生产实施对底层基础设施提出了更高的要求。列出的要求是确保成功部署高性能生产集群的一个很好的起点。为了在虚拟化环境中获得最佳的 MinIO 体验,我们建议使用以下规格进行测试(每个虚拟机):

  • 8 个虚拟CPU
  • 32GB内存
  • 4 个磁盘(由物理磁盘支持,如上所述)。尽管运行更少的磁盘没有技术限制,但您将无法对磁盘故障或纠删码设置进行可靠的测试,并且您可能没有足够的吞吐量来处理非常大的工作负载。
  • 10Gbps 网络。请使用上面列出的 mperf 工具来确保虚拟机提供预期的吞吐量。在一些较旧的虚拟机管理程序中,对磁盘施加了人为的带宽限制。尽管可以使用低于 10Gbps 的网络,但请记住,即使是网络密集型的小型工作负载也会很快使 1Gbps 网络饱和


通过使用上面提到的 WARP 基准测试工具,您可以确定是否需要额外的资源来满足应用程序的要求。

适用于虚拟化环境的高性能对象存储

MinIO 轻量级但可扩展、具有弹性和高性能,将多租户云原生对象存储引入虚拟化环境。通过添加世界上最快的对象存储,充分利用软件定义的数据中心。


立即下载 MinIO开始吧。如果您对在虚拟化环境中充分利用 MinIO 有任何疑问,请通过 [email protected] 联系我们或加入Slack 社区


也发布在这里