构建云时代数据湖 华为云发布全新一代对象存储服务OBS 3.0

企业动态 数据湖
近日,在2018华为中国区生态伙伴大会——“华为云基础设施服务:稳定极速,为企而生”分论坛期间,华为云发布了其全新一代对象存储服务OBS 3.0。

近日,在2018华为中国区生态伙伴大会——“华为云基础设施服务:稳定极速,为企而生”分论坛期间,华为云发布了其全新一代对象存储服务OBS 3.0。

云时代存储系统的挑战:从存储到数据的转身

在当天的论坛上,华为云对象存储专家首先通过一个客户案例阐述了万物互联的智能时代,对云存储的述求:数据的全连接,完整数据生态,生命周期管理,以及高扩展、高性能、高可靠等能力,这些都给下一代云存储带来了全面的挑战。

依托于华为十余年在企业和分布式存储领域持续的技术积累,结合对未来海量数据云上应用的前瞻性理解,华为云研发了基于DFV数据功能虚拟化平台的新一代对象存储服务0BS 3.0:拥有10万+节点的扩展能力,单桶千亿对象统一命名空间,轻松应对EB级容量需求,并且***的性能与可靠性。

Image

以云上数据为中心,高性能、高扩展和高可用的全栈数据服务架构

华为云全新的对象存储服务OBS 3.0架构全微服务化,在4层总体架构内,每个功能都是独立的微服务,每个微服务都可以独立部署和扩展。而受益于多级分区管理技术,让整个系统的扩展性和故障域获得了很好的平衡,满足了公有云系统超高可靠性苛刻要求,并拥有AZ级容灾和跨地域容灾能力。

华为透露其对象存储服务已经摒弃10GE网络,全面部署25GE网络,并且通过独有的RDMA网络技术,海思定制硬件HTTPS加速技术,Flex EC技术等,使得接入性能大幅提升,轻松达到单流300MB/S,单桶20000TPS,小对象延迟<10ms等业界最领先性能指标,远远优于友商。

基于SQL标准的OBS Select接口,数据访问超便捷

一直以来,公有云对象存储中数据都是作为整体访问的,如果要分析一个压缩文件数据,需要下载和解压后再对数据进行处理,才能获取到结果。如何更快捷地挖掘数据潜在价值,是当前企业共同面对的问题,华为云已洞察到企业用户面临的这类问题,并且在对象存储服务OBS 3.0中实现了OBS Select功能,提供SQL接口对OBS对象做数据分析和计算。

具体来说,华为云该功能有如下优点:

1.数据即来即用:在OBS的接口参数中直接嵌入SQL语句,即可分析对象存储内的数据;

2.语法兼容性强:支持多种SQL标准,包括Spark SQL,标准SQL等,用户不用预先定义数据模型,系统自动识别数据内容;

3.数据扩展性强:支持业界主流的结构化数据(如CSV,Parquet,ORC,JSON)和用户自定义数据格式;

4.低成本快速访问:对数据进行过滤,相对于直接下载OBS数据,极大降低带宽成本,减少数据获取时间。

在论坛现场,华为通过视频演示了在查询违章记录场景下,使用OBS Select接口,无需导入数据库,无需数据迁移的情况下,直接对OBS桶内的数据进行SQL检索和计算,极速返回结果,OBS Select强大的功能和易用性,引起了参会嘉宾浓厚兴趣。具介绍,该功能更将会近期在华为云对象存储服务上线。

大会现场,华为云专家还介绍了更多对象存储服务OBS 3.0业界领先能力:近数据计算能力; 3AZ和数据强一致性能力;数据中心到盘片全域故障预防和管理能力;低功耗低碳环保的冷存储系统等。

华为云对象存储服务OBS 3.0,为客户构建云时代的数据湖,通过全连接的数据持续给企业创造价值。

另,华为云对象存储OBS服务联合其全新一代云服务器发布了***限时促销计划,将于4月2日正式开售,其中OBS更是低至5折,感兴趣的朋友可以扫码参与。
点击了解华为云对象存储OBS: https://www.huaweicloud.com/product/obs.html

责任编辑:张燕妮 来源: 51CTO
相关推荐

2015-06-10 11:03:50

2021-06-10 14:01:38

大数据数据平台数据湖

2021-06-10 09:00:00

数据湖架构数据平台

2018-10-24 16:31:24

华为云

2009-04-14 21:45:33

LinuxUbuntu系统服务器

2009-04-14 19:36:31

Vmware虚拟化云存储

2018-03-29 15:50:48

华为

2019-04-02 16:23:56

腾讯云网络存储

2020-05-28 16:28:34

华为OceanStor存储

2018-10-15 15:04:32

华为云

2010-05-10 16:25:49

2016-09-13 17:32:33

数据中心

2018-10-16 16:46:14

华为云

2018-10-16 15:07:26

华为云

2018-11-22 19:29:23

腾讯云数据库企业

2019-04-04 15:29:11

华为

2018-09-14 13:06:36

华为云

2019-03-01 10:19:35

存储

2013-05-29 21:16:10

点赞
收藏

51CTO技术栈公众号