11 云对象存储以存储公共和私有数据

在传统环境中存储海量数据是昂贵的。让我们探索市场上我们拥有的成本效益的非结构化数据存储解决方案。

云存储使得存储变得容易且降低成本而不影响质量和安全性。

对象存储可用于存储任何对象，如照片、视频、音频、pdf、文档、静态文件等。这也可以用于链接或备份目的。

云存储的好处是您可以从互联网的任何地方上传和下载数据，并且还可以选择限制访问。因此，您可以根据自己的需求选择两种选项。另一个值得一提的是，您只需付费您所使用的。

云对象存储是什么？

对象存储通常将数据保存在没有任何文件层次结构的情况下，每个数据片段都有其独立的标识符和元数据。

这些非结构化数据可以是照片、视频、学术论文、网页等。

例如，假设您的硬盘文件都没有任何文件夹或子文件夹。接下来，您有每个文件的元数据和标识符来搜索和获取特定的数据。这就是基于对象存储的硬盘的样子。

现在想象一下，所有这些数据都存储在像Google Drive这样的地方，只需一个互联网连接即可访问。这就是云对象存储。

这通常是一个适用于大部分静态数据的低成本解决方案，与流媒体服务相比，它不需要进行很多写操作，而是进行了更多的读操作。此外，与文件和块存储不同，它的可扩展性没有界限。

对象存储的主要区别在于数据存储的方式。没有任何文件结构，一切都保存在所谓的数据湖、池或存储桶中，跨多个链接进行。随后，可以根据标识符和元数据使用应用程序编程接口（API）检索信息。

但由于它专为静态数据而设计，所以不适用于持续修改或快速检索。

对象存储如何工作？

如前所述，您将所有数据放在一个数据存储桶中，每个数据点都有唯一的标签。

这些标签称为标识符和元数据。您可以将标识符视为标题，而元数据可以告诉您有关文件类型、上次修改、文件大小等信息。

由于直接与数据湖进行交互可能会很复杂，因此您可以使用API调用和传输协议（如HTTP/HTTPS）来获取数据。

最重要的是，您不局限于单个数据中心，而是可以在全球范围内存储信息，并具有无限的可扩展性。

云对象存储的好处是什么？

与文件和块存储系统相比，云对象存储具有许多优势。

首先是可扩展性。您可以根据需要添加任意量的数据，而不必担心达到容量上限。此外，它大多是按需付费和低成本的。这意味着您只需根据供应商政策支付使用量和数据传输费用。

此外，它几乎是一个单一数据池中的一切。这使得支持自定义的标识符和元数据的简单搜索操作成为可能。

云对象存储的用例

云对象存储在需要存储大量数据以便全球访问的用例中表现出色。

传感器数据：它可以在传感器数据捕获的多种应用中使用，包括物联网、医疗历史、学术研究等。

科学应用：任何数据密集型场景，如科学研究、大数据分析等。

备份和恢复：云对象存储的低成本使其成为备份和归档应用的理想选择。此外，简化的检索为简单的恢复铺平了道路。

媒体存储：用于存储静态媒体，如音频、视频、图像、gif等，并结合CDN（内容分发网络）进行全球传输。

云原生应用：对象存储最适合存储 cloud-native applications 中的数据。它帮助它们摆脱传统的单片应用开发，并实现更大的可扩展性、轻松的开发、更低的成本等好处。

如果你正在寻找自托管的S3兼容存储，那么你应该 try MinIO。

让我们来看看一些最好的云存储服务。

顺便说一句，在本文中，我将介绍应用程序的对象存储解决方案。对于个人和商业用途，你应该查看Dropbox、Google Workspace 或其他 cloud storage solutions。

AWS S3

如果你已经在使用云，这是很容易猜到的。它是提供对象存储的著名和开拓者之一。

不用担心存储限制，你可以上传任意数量的数据。

AWS S3 提供99.999999999%的耐久性，并提供使用浏览器、API上传/下载数据的选项。

有三种存储类别可供选择。

标准 – 低延迟的通用存储类型，非常适合内容分发、大数据分析等。

标准 IA（不经常访问）- 如果内容不经常访问，可以选择IA。IA的成本低于标准，适合存储长期不需要每天访问的数据。

Glacier – 成本比IA低，适合数据归档。

AWS 提供生命周期管理，可以将对象从一个存储类别转换为另一个存储类别。S3是以区域为基础的，这意味着你可以将数据保存在离你的客户和访问者更近的地方，以实现更快的内容分发和上传速度。

如果你正在考虑灾难恢复，那么它已经覆盖了。它支持跨地区复制，可用于备份。如果你决定选择AWS S3，请别忘了查看 security best-practices。

Google Cloud Storage

Google提供了适用于小型到企业级业务的低延迟存储。Google提供四种类型的存储。

与S3类似，GCS 也提供了数据生命周期功能，可以将数据从一种存储类型转移到另一种存储类型，或者还可以将其配置为删除数据。

可能会有这样的情况，你只想保留数据一段时间。

例如，下面的条件将删除存储桶中任何30天前的数据。

考虑到Google Cloud在全球范围内拥有多个数据中心，你可以将数据存储在亚洲、欧洲和美国的各个城市。

最近，GCS推出了 requester pays 功能，其中请求者支付数据请求的费用。在GCP免费层中，你可以获得5 GB的区域存储空间来体验。

Spaces

DigitalOcean 最近推出的一项存储服务名为 Spaces，内置了CDN。

目前，它在以下四个位置提供服务。

• 纽约
• 新加坡
• 阿姆斯特丹
• 旧金山

你可以使用拖放界面或通过API或CLI编程来控制数据。

Spaces的一些常见用途包括：

• Web资源，如HTML、图像、CSS、js或托管静态网站
• 日志存储
• 保留备份、数据归档

DO Spaces兼容S3，支持 CORS。如果你正在寻找固定费率的月度付款，那么 DigitalOcean 将是最便宜的之一。

Bunny

Bunny Edge Storage是为全球用户开发的云存储解决方案。一旦文件上传，您可以从任何地方访问任何文件。它帮助您在四个大洲传送内容，并提供比传统云存储更快的下载速度和延迟。

Bunny Edge Storage可以复制您的数据，因此在数据中心故障转移期间不会丢失任何数据。此外，它直接与Bunny CDN集成，使您可以体验更好的性能并节省因CDN服务和存储之间的内部连接而产生的成本。

您可以使用HTTP API、FTP或文件管理器上传数据，并在云中获取文件以便在任何您想要的地方下载。Bunny Edge Storage通过无限可扩展性、战略定位和直接CDN集成来实现更好的性能。您还可以对比传统存储提供商的基准。

在全球延迟方面，Bunny Edge Storage的平均值为41毫秒，是最低的。在全球吞吐量挑战中，平均值为58.3MB/s，是其他提供商中最高的。

从每月0.01美元/GB起，选择任何计划立即开始免费试用，欧洲地区。您还可以一次选择两个、三个或四个地区。

Vultr

Vultr以每月5美元提供高性能对象存储，包括250GB存储和1000GB带宽。它利用NVMe（非易失性内存扩展）缓存，以确保频繁访问的数据以更快的速度可用。

随着您的增长而根据需要进行扩容或缩减，并通过API或兼容S3的工具进行管理。Vultr将数据克隆三次，以提高可靠性。

Cloud Files

Cloud Files由Rackspace提供，由OpenStack提供支持，可提供可扩展的云存储。它与AKAMAI CDN紧密集成，以更快地提供全球内容。

您可以将文件保持私有或公开。

Rackspace提供独特功能，如临时URL，仅在特定时间段内有效。这是一个完美的解决方案，当您想要销售数字媒体并希望用户在定义的时间内下载时使用。

Cloudflare

不喜欢为移出数据而付费？尝试一下Cloudflare’s R2 – 一个全球云对象存储解决方案，零数据移出费用。

Cloudflare提供多种方式供开发人员访问其R2存储 – 在worker API中使用、S3 API和公共存储桶。

此外，与著名的Cloudflare CDN集成意味着在全球范围内轻松交付，延迟尽可能低。

此外，没有任何供应商绑定。因此，您可以自由地使用兼容S3的API将数据移动到多个云中。

R2定价取决于总存储量和执行的操作类型。您可以读取数据（B类）或更改其状态（A类），并根据实际情况收费。

最棒的部分是免费层，提供10GB/月存储空间、100万个A类操作和1000万个B类操作。

IBM

Cloud storage by IBM提供服务器端加密和SSL/TLS传输。可以使用Web界面、RESTful API和SDK来控制数据。

通过使用SDK，它使您不仅可以与IBM云服务一起使用存储，还可以与其他平台一起使用。有两种可靠性选项。

• 区域 – 在多个数据中心中存储数据，但在同一区域
• 跨区域 – 在多个区域存储数据，如果您正在寻找基于区域的高可用性非常有用。

IBM提供四种类型的存储。

• 标准 – 通用数据，频繁访问
• 保险库 – 一个月或更少访问一次的数据
• 冷保险库 – 长期数据保留的偶尔访问数据
• Flex – 动态数据，数据频繁和不频繁访问的混合

在精简计划下，你可以免费获取25GB的数据。

阿里巴巴OSS

Alibaba Cloud OSS（对象存储服务）提供99.9%的可用性保证。成本基于你的使用情况，无需预付或长期承诺。

阿里巴巴存储能够处理超过每秒50,000个请求，并且具备内置的多层安全机制，以保护免受DDoS和未经授权的登录尝试的影响。

Azure Blob存储

使用Microsoft Azure blog storage存储任何非结构化数据。Azure的其中一个重要优势是其位置。

例如：如果你正在寻找印度的多个数据中心位置，那么目前Azure的覆盖范围更好。

Azure Blob存储针对数据湖进行了优化。他们还提供其他类型的storage，例如文件和存档，以满足其他需求。

Oracle存储

Cloud storage by Oracle允许你每个存储桶存储无限的非结构化数据。其中一些特点包括：

• 多种连接方式 – OpenStack Swift API、HDFS插件、REST API、Java SDK、Python CLI和控制台
• 可扩展 – 不用担心数据大小，它会自动扩展。
• 加密 – 使用256位AES算法进行服务器端加密

结论

我知道在云中存储数据有多种选择。选择最好的方法是尝试它们。上述列出的大多数云存储服务提供商都提供免费试用。

或者，如果你想在本地托管它们，你可以尝试使用self-hosted S3 compliant software。