在SaaS公司中并不罕见的故事中,一个云原生网络安全组织面临着大规模升级的云成本,因为其日志数据扩展到多exabyte。 这个组织同时受到影响,因为存储成本只是问题的一部分:他们的云存储提供商,亚马逊的S3,只是没有处理这些数据量所需的日志操作所需的性能。 这就是 MinIO 的 AIStor 的本地架构同时解决两个问题的地方:成本和性能。 Challenge 挑战 他们的担忧是多方面的:他们不得不确保他们在传输日志数据之前,期间和之后没有中断,任何数据丢失或停机时间都会使他们损失客户和声誉。 AWS 的定价结构负责其困难的经济方面。 成本与数据量相结合,额外的费用从exgress(AWS的转移)中积累,从专门的存储类和加密的检索费用。更具体地说,对于这个网络安全公司来说,GETS和PUTS的成本,因为他们在公共云中运行的日志数据变得无法容忍。 S3 兼容存储 S3 兼容存储 最后,他们需要一个S3兼容的对象仓库,他们可以自行实现和管理。他们已经拥有一个相互连接的数据架构,取决于S3 API。 任何解决他们的困难的解决方案都必须落入他们的现有堆栈,并使用他们所拥有的所有东西。 S3 API是现代数据堆栈的组成部分;几乎任何人使用的任何软件都以某种方式或另一种方式容纳了S3 API。 Solution: Adopting MinIO AIStor 解决方案:采用Minio AIStor 在评估他们的挑战和研究潜在的解决方案后,他们意识到只有AIStor才能满足他们的需求。 AIStor的对象存储为他们提供了: S3 兼容性:允许网络安全公司不间断地迁移到其运营。 高性能:他们需要更快的检索时间来支持他们的安全分析和事件响应工作流程. AIStor 在 32 节点集群配置中,每秒读取速度高达 2.6 terabits (325 GiB / s) 和写入速度高达 1.32 terabits / s (165 GiB / s) 是一个自然的选择。 可用性和弹性: Erasure 编码是 AIStor 的核心组成部分,在驱动器或节点级故障事件中提供弹性,确保其安全操作的连续运行时间。 最好的类型支持:能够利用恐慌按钮,并直接与工程师在关键问题上进行交互成为当网络安全公司继续扩张时的迫切需要。 读取速度高达 2.6 特拉比特 写入速度高达每秒 1.32 特拉比特 可用性和弹性 可用性和弹性 排除代码 最好的班级支持 最好的班级支持 恐慌按钮 Implementation & Architecture 实施与建筑 此安全日志数据是通过第三方以及使用AIStor作为一个本地日志管理工具输入的。 对于分析和安全事件处理,他们利用了实时流和批处理框架的组合,确保了快速的事件检测和响应,此外,他们的基础设施旨在支持高速网络,利用NVMe存储和100GbE网络以有效地处理安全操作的需求。 S3 兼容存储 S3 兼容存储 根据AIStor客户工程主管Arvind Gupta的说法,“鉴于他们是一家安全公司,数据的可持续性和可用性至关重要,这意味着他们需要确保写给AIStor对象商店的数据永远不会丢失。 对于大多数组织来说,数据的可持续性和可用性是最大的担忧。 高可用性可以通过跨不同可用区和区域的多站点部署实现。 破解代码 破解代码 CyberSecurity公司发现,他们可以利用现有的DevOps和IT人员进行迁移。他们在云技术方面的经验很容易转移到AIStor。这是AIStor更广泛的努力的一部分,旨在与S3 API完美匹配,其中包括对错误消息进行调节。这意味着网络安全公司能够自行配置和部署AIStor。当然,AIstor能够协助规划流程和硬件咨询,但这一迁移的严重提升落在了网络安全公司自己的团队身上,该公司能够不太容易地管理它。 AIstor 运行在商品硬件上,这意味着网络安全公司能够使用一个易于访问和可靠的配置服务来实现它. 没有必要为专业设备提供源、维护或培训。 他们可以根据自己的需求进行硬件交换,并且因为他们没有与任何特定供应商联系,他们可以通过添加和替换硬件来谈判最佳价格。 相关: 对象存储删除编码 vs. 区块存储 RAID 对象存储删除编码 vs. 区块存储 RAID Dealing with Something Similar? 面对类似的事情? 弄清楚如何处理日志或非结构化数据并非网络安全的独特问题,许多组织都面临着大量的日志数据管理或存储多长时间的问题。使用管理服务来存储和保存日志可能非常昂贵。 回到公共云成本的主题,天涨和不可预测的云账单肯定不会被忽视。问题是,这些开支在什么时候对一个组织来说不再有意义吗?有一个关键点,即日志数据(或任何数据)的量增加到不再有经济意义将数据存储在公共云中。 当组织需要移动大量“热”数据或由于层级化,API调用,复制,加密和类似流程时,其达到该门槛的速度要快得多。 云将始终在我们的架构中占有一席之地,这对于爆炸性、实验性和周期性工作负载是很好的。但是,像这个网络安全公司这样的组织越来越多地将云理解为一个操作模型,而不是一个特定的供应商。 Growing Footprint  不断增长的足迹 网络安全公司继续扩大其AIStor足迹,以支持各种新举措的日益增长的数据需求. 自从从AWS迁移到由MinIO AIStor驱动的本地私有云以来,网络安全公司一直在不断扩大其现有的群集并增加越来越多的群集。 网络安全公司从 AWS 过渡到 AIStor 体现了云回归在降低成本和提高性能方面的力量. 通过利用 MinIO AIStor 的高性能、兼容 S3 的对象存储,他们创建了一个可扩展、高性能和成本效益的基础设施来支持他们的运营。 或者在我们的 . 您好,我 斯拉克 您好,我 斯拉克

The is an opinion piece based on the author’s POV and does not necessarily reflect the views of HackerNoon.

Developers do. Download MinIO and see for yourself. 

MinIO

該音頻是用故事的原始語言製作的！

逃避 AWS S3:一家网络安全公司如何通过AIStor降低成本

About Author

註釋

標籤

这篇文章刊登在

Related Stories

释放人工智能的力量。前沿技术的系统评价：摘要与介绍

成功云迁移的完整指南：策略和最佳实践

从论坛到信息流：社交媒体算法如何塑造数字互动

Telegram：加密岛通往大陆的桥梁

释放人工智能的力量。前沿技术的系统评价：摘要与介绍

成功云迁移的完整指南：策略和最佳实践

从论坛到信息流：社交媒体算法如何塑造数字互动

Telegram：加密岛通往大陆的桥梁

Light-Mode

Classic

Newspaper

Minty

Dark-Mode

Neon Noir

Minty

HN StartUps