2022年11月8日,以“释放数字生产力”为主题的华为全联接大会2022在深圳举行。会上, HashData与华为联合发布了云原生数仓存储解决方案。
通过双方的合作,HashData基于华为OceanStor Pacific分布式存储打造了多云架构下的数据全局共享、云上云下能力一致的数仓存储底座,将企业级存储能力融入到私有云和公有云,共同为企业提供面向多云、生态开放的专业数据服务平台。
HashData CEO简丽荣表示,“HashData和华为携手推出的云原生数仓存储解决方案,实现了云上云下的数据高效共享,免去数据在多云间的迁移,为跨多云数据分析提供随时随地的数据访问服务。另外,基于华为OceanStor Pacific分布式存储的跨站点容灾、海量小对象加速、大小IO负载均衡、热温冷数据分级等企业级存储特性,实现百万级表复杂查询分析、百亿小对象高速访问和多数据中心容灾等,满足企业大规模数据分析和业务连续性诉求。”
技术创新 打通数据孤岛
当前,随着数字化转型的持续推进,数据总量和多样化数据应用蓬勃发展,数据已成为企业创新发展的关键要素。同时,传统IT架构无法应对业务潮汐弹性扩展、千万级查询次数每天和跨站点高可用性需求,“上云用数”已成为企业未来发展的必选项。
简丽荣指出,云计算行业正在步入多云的时代。多云趋势下,各种企业应用会根据业务需要部署在多个数据中心和公有云平台上,应用源源不断地产生格式各异的数据,数据碎片化、数据孤岛等问题日益严重。
同时,在新的多云建设趋势下,云上云下应用种类多,数据分散在不同区域,难以实现跨区域跨云数据共享与分析。在这样的大背景下,如何实现数据的高效存储、共享与分析,正成为每个CIO和CDO需要回答的问题。
简丽荣认为,为了解决这个难题,企业需要的是一个以数据为中心、构建于多数据中心、多公有云平台之上的数据云(Data Cloud)。通过Data Cloud平台,形成统一、整合和权威的企业数据视图,全域数据共享,高效访问,跨地域、跨部门的高效协作,从而充分释放数据价值。
HashData和华为存储作为各自领域的领军企业,在产品及技术上均有着深厚积累。
HashData是一款企业级云原生数据仓库,通过创新的存储、计算、服务、应用层架构设计,提供了传统解决方案无法比拟的高并发、弹性、易用性、高可用性、高性能和扩展性,实现了云原生、并发高弹性、应用松耦合、分析多样化、湖仓一体化、拓展多维度、运维自动化,能够大幅降低企业进行数据分析的成本。
华为OceanStor Pacific分布式存储是一款为海量非结构化数据设计、可大规模横向扩展、弹性伸缩的存储产品,可向上层应用同时提供文件存储服务、对象存储服务、大数据存储服务,以及丰富的企业级业务功能和增值特性。
简丽荣表示,“依靠OceanStor Pacific分布式存储底座,我们的联合解决方案支持海量的结构化、半结构化和非结构化全数据类型,支撑包括BI报表、风控管理、自助分析、实时营销等上100种应用;用户可以通过ANSI SQL 2008标准对百万级的表数据进行复杂查询分析;计算、存储分离,两者可以独立扩缩容,充分发挥云计算的弹性优势;秒级扩缩容,支持万级计算机节点,并发访问任意扩展;统一存储资源池,实现PB级数据随心共享。”
共建生态 释放数据价值
数据库是企业进行数据管理和分析的核心。HashData作为一款面向多种数据分析场景的高性能分析型数据库,计算集群和持久化存储严格实行物理分离:计算集群由云计算厂商的虚拟机组成,持久化存储则可以使用华为OceanStor Pacific作为对象存储。
通过支持对象存储,HashData实现了计算与存储解耦,能够提供完全兼容多个公有云与混合云的数据管理能力,为企业多云战略的实施提供了一个灵活而易用的解决方案。此外,对象存储的访问方式是基于HTTP协议,能够无缝与各种Web应用和工具集成,并应用于广域网,从而实现跨数据中心、跨云平台的数据访问,使多云架构、跨云数据共享成为可能。
HashData使用的对象存储,独立于计算节点。利用对象存储技术,可以提供近乎无限的扩展能力,避免了传统数据平台基于成本考虑的归档需求和计算成本浪费。通过测试发现,HashData在计算节点和对象存储之间增加缓存层之后,相比MPP架构,几乎没有性能上的损耗,同时计算量可以提升近5倍。
华为OceanStor Pacific支持开放数据格式、多样接口(包括S3、HDFS、Streaming、K-V等),多样化数据分析引擎即插即用;采用元数据网关,可以实现统一命名空间智能纳管;支持高性能读写,实现数据加速。许多行业用户之所以青睐华为OceanStor Pacific,是因为它率先在存储上支持湖仓融合的新兴数据格式,一份数据可支持数据湖、数据仓库同时访问,并进一步向湖仓一体、一湖多云和实时分析演进。
在联合方案中,华为OceanStor Pacific提供统一数据存储底座,支持数据高效共享,在以下三个方面提供了强力的技术保证:
- 多站点数据同步:支持多达12站点EC,存储利用率高达83.9%,支持2站点同时故障,业务不受影响;
- 千亿小对象高性能读写:I/O自适应,兼顾大、小IO性能诉求,小对象小IO智能合并,热温冷数据分级,支持小对象预取缓存;
- 全局共享缓存,每秒百万次读写:跨异构数据源统一访问数据,统一数据格式,支持计算热插拔,高性能存储介质、网络,数据高并发读写;
此次, HashData联合华为存储共建开放多云生态,代表着双方通过架构级创新技术,打破多云间数据孤岛,推动和引领云上云下的技术融合,充分满足了YB数据时代多样化负载的应用需求,助力和加速企业数字化转型和智能升级。
基于领先的技术优势,结合自身丰富、成熟的实践经验,HashData已广泛应用于金融、电信、能源、政府、交通、互联网等领域,覆盖超过50家行业客户,为众多头部企业的数据管理和分析服务提供支持。
简丽荣表示,HashData和华为的联合方案,可为用户提供安全、稳定、易扩展的产品与解决方案技术服务。未来,HashData将与华为存储共同携手助力千行百业数字化转型,挖掘和释放更大的数据价值。
**粗体** _斜体_ [链接](http://example.com) `代码` - 列表 > 引用
。你还可以使用@
来通知其他用户。