头图

Alluxio 与阿里云正式达成技术合作


近日,开源云数据编排软件开发商 Alluxio 与阿里云达成技术合作,其核心产品 Alluxio 数据编排平台将与阿里云云原生数据仓库 AnalyticDB 集成,有效解决存储计算分离场景下从异构数据源读取数据带来的性能损耗。

相较存储和计算耦合的架构,Alluxio 数据编排技术产品基于存储计算分离架构。存储计算分离可以带来诸多好处,例如允许独立扩展计算和存储、提高资源的利用率、提高业务的灵活性等。特别是借助云上的基础设施,存储可以选择更为便宜的对象存储 OSS 以及其它混合存储,计算资源可以按需付费和弹性扩缩容,这些都使得存储计算分离架构更好的发挥云计算的成本优势和灵活性。但是,在存储计算分离的场景下,通过网络从远端存储读取数据仍然是一个代价较大的操作,往往会带来性能的损耗。


阿里云云原生数据仓库 AnalyticDB ,采取计算与存储完全分离的架构,通过跟 Alluxio 的技术合作,实现存储分层服务化,减少从远端读取数据带来的延时和 IO 限制,实现更小的查询延时和更高的吞吐,有效支持对用户存储在 OSS、HDFS 等介质上的各种文件格式进行 Adhoc 查询、BI 分析、轻量级 ETL 等数据分析工作。经 TPC-H 1TB 数据测试,查询性能普遍提升1倍以上。


“云原生数据仓库 AnalyticDB 一直致力于提供云原生和离在线一体化的数据分析服务,助力企业实现数据驱动业务发展。很高兴 AnalyticDB 与 Alluxio 的技术合作,这次合作将提供高性价比的扩展数据分析能力,助力用户实现更全域、更高效的数据价值探索。”


“此次,Alluxio与阿里云云原生数据仓库 AnalyticDB 产品的深度集成,将帮助更多业务上云的企业,能够更加快速、便捷地访问数据,获取可用于决策的分析结果,同时,还能获得更可靠的SLA和更低的数据成本,我们很高兴能够与阿里云达成技术合作,共同推动企业在数据计算与分析领域的效率提升。”


在数据上云的大背景下,随着网络和存储硬件能力的提升,存储计算分离逐渐成为了大数据处理的重要趋势。阿里云将与 Alluxio 携手为客户构建高效的大数据技术平台以及离在线一体化的数据分析服务,同时实现降本增效。未来阿里云将携手更多生态伙伴,助力企业更高效的挖掘商机。



Alluxio
Alluxio系统(原名Tachyon)是全球首个分布式超大规模数据编排系统,孵化于加州大学伯克利分校AMP实验室...

Alluxio系统(原名Tachyon)是全球首个分布式超大规模数据编排系统,孵化于加州大学伯克利分校AMP实验室...

36 声望
10 粉丝
0 条评论
推荐阅读
Alluxio跨集群同步机制的设计与实现
Alluxio 位于存储和计算层之间,在不同的底层文件系统(UFS)上层提供高性能缓存和统一的命名空间。虽然通过 Alluxio 对 UFS 进行更新可使 Alluxio 与 UFS 保持一致,但在某些情况下, 例如在运行多个共享某一个或...

Alluxio

封面图
SegmentFault 思否宣布将接入百度「文心一言」,提升开发者获取知识的效率
作为中国领先的新一代开发者社区,我们以「凝聚集体智慧,推动技术进步」为使命,长期关注前沿技术发展及产业应用。2023 年 2 月 11 日,ChatGPT for SegmentFault 浏览器插件上线,SegmentFault 成为了国内首个...

SegmentFault思否11阅读 3.1k评论 1

对 ChatGPT 做一次技术面试(ChatGPT 没能通过)
问:对一个系统的描述如下:系统中有大量注册用户,用户可以关注其他用户。用户可以发布消息,消息包含发布者、发布时间和可见性。消息的可见性可以是公开、不公开或仅对关注自己的用户可见。请设计这个系统的数...

捏造的信仰7阅读 1.6k评论 1

封面图
超详细的ChatGPT注册教程来了
最近一周,大家都在讨论ChatGPT,一些主流的技术社区更是将ChatGPT吹的神乎其技,那ChatGPT是什么呢?又能给我们带来哪些变化呢?。带着这些问题,我打算先注册并使用 ChatGPT,供想要体验 ChatGPT 的小伙伴们参考。

xiangzhihong3阅读 2.7k评论 3

阿里云被曝 UI 抄袭,复刻 SkyWalking Trace Profiling 页面
2023 年 1 月 3 日,SkyWalking 官网发布消息,称阿里云抄袭了 SkyWalking Trace Profiling 整体页面 UI,包括页面布局、文字和分析任务设置,唯一的区别仅有颜色方案。

鸣飞5阅读 5.3k

使用 🧨 Diffusers 实现 ControlNet 高速推理
自从 Stable Diffusion 风靡全球以来,人们一直在寻求如何更好地控制生成过程的方法。ControlNet 提供了一个简单的迁移学习方法,能够允许用户在很大程度上自定义生成过程。通过 ControlNet,用户可以轻松地使用...

HuggingFace3阅读 1k

封面图
Light·技术公益创造营,开营了!
第三届腾讯Light·技术公益创造营(简称“腾讯Light”),围绕数字时代下“未成年人心理健康”、“老年人用网安全”、“生物多样性保护”三大议题,号召社会各界人士打造技术公益多元解决方案,以共同解决更多的社会公共议...

SegmentFault思否3阅读 11.3k

Alluxio系统(原名Tachyon)是全球首个分布式超大规模数据编排系统,孵化于加州大学伯克利分校AMP实验室...

36 声望
10 粉丝
宣传栏