加入收藏 | 设为首页 | 会员中心 | 我要投稿 常州站长网 (https://www.0519zz.com/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 站长资讯 > 外闻 > 正文

4个开源对象存储平台

发布时间:2021-04-06 16:03:39 所属栏目:外闻 来源:互联网
导读:是一个开源数据环境工具,可让您管理基于对象存储的数据湖。这些数据湖是存储库,您可以在其中转储所有结构化和非结构化数据类型。LakeFS还集成了许多工具,并支持Amazon S3和Google Cloud Storage。此外,它可与所有主要数据框架一起使用,例如Hive,Spark

是一个开源数据环境工具,可让您管理基于对象存储的数据湖。这些数据湖是存储库,您可以在其中转储所有结构化和非结构化数据类型。LakeFS还集成了许多工具,并支持Amazon S3和Google Cloud Storage。此外,它可与所有主要数据框架一起使用,例如Hive,Spark,Presto,AWS Athena等。

借助LakeFS,您可以扩展PB级数据,还可以通过其类似Git的分支和版本控制方法来添加数据,这使您可以在不破坏数据的情况下添加更新。这种类似于Git的方法还有助于轻松撤消数据更改,这使得处理数据变得更加轻松和安全。

您还可以通过查看LakeFS文档来了解其他特性。h是对象存储,块存储和文件系统开源平台。它提供了与Amazon的S3 REST API和OpenStack的API Swift完全兼容的对象存储功能。

Ceph的对象存储使您可以使用本地语言绑定和Ceph提供的其他技术轻松访问数据对象。如果您想改变公司的IT基础架构及其管理大量非结构化数据的能力,这是一个很好的解决方案。他们还拥有一些软件库,这些库使使用Java,C,C ++,Python,PHP和其他一些语言编写的软件能够使用本机API的功能访问Ceph的对象存储系统。inIO是一款开源云存储软件,可为大型数据基础架构提供高性能的分布式对象存储。它与Amazon S3 API兼容,在GitHub上有超过26K颗星,有680多位贡献者在使用它。

MinIO服务器存储所有类型的非结构化数据,例如照片,视频,日志文件等。它也可以在开源Apache V2许可下使用,并且许多最强大的大数据和机器学习应用程序都使用MinIO S3对象存储。您还可以在MinIO网站上查看许多其他功能。

(编辑:常州站长网)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!

    热点阅读