【Alluxio&大型银行】科技赋能金融,兴业银行按下“大数据处理加速键”

2022-02-17
阅读 6 分钟
1.2k
关于银保监会对银行业,包括保险业在金融科技方面提出的一些要求。我们后续会有几方面的重点建设方向:第一个就是大力推进云化转型,包括云原生的转型和大数据云等一系列云化的转型,对于我们的要求也是越来越高。第二也是比较重要的,持续优化科技与业务融合,用数字化支持企业数字化转型,通过为业务赋能为业务展开提...

【Iceberg+Alluxio】助力加速数据通道(下篇)

2022-02-16
阅读 7 分钟
1.4k
可能很多人用Presto只用 Hive Connector,其实Iceberg connector跟Hive差不多,不管从实现,还是从功能上都有互相的参照,尤其是在实现方面使用了非常多的Hive connector底层的代码。它创建table也是一样,我们可以从一个 TPC-DS数据的 customer表里抽几列再创建一个table,你可以指定这个数据的格式,可以是Parquet也可...

【Iceberg+Alluxio】助力加速数据通道(上篇)

2022-02-16
阅读 8 分钟
2.4k
Alluxio是2014年在伯克利 AMPLab孵化的一个项目,那时候名叫Tachyon,是跟Spark同一期孵化的分布式存储项目。截止到今天为止,我们这个社区里已经有超过1000名的contributor参与搭建了社区代码和各种活动,在Slack committee里面已经有5000以上的 member进行互动,大家也把技术广泛应用在各种开源场景里面。在去年的时候...

Alluxio中的元数据同步:设计、实现和优化

2022-02-16
阅读 5 分钟
2.1k
元数据同步(metadata sync)是Alluxio的一个核心功能,它能使文件和目录与底层存储系统中的数据源保持一致,便于用户通过Alluxio获取最新数据。同时,了解内部进程对于性能调优也十分重要。本文介绍了Alluxio元数据同步功能的设计和实现。在Alluxio中,元数据是指Alluxio文件系统中的文件和目录信息,包括所有者、组、...

解决方案概览丨如何使用 Alluxio 进行机器学习模型训练

2022-02-16
阅读 5 分钟
1.5k
随着人工智能(AI)和机器学习(ML)的广泛应用以及在业务上的重要性不断增强,企业也在大力发展 AI/ML 的应用,这些应用要求数据平台满足以下要求:

甲子光年专访丨一家开源公司,要做大数据时代的“滴滴打车”

2022-02-16
阅读 4 分钟
718
在中国,大型科技企业加入开源阵营。阿里云发布全新操作系统“龙蜥”并宣布开源,蚂蚁金服开源OceanBase数据库,华为发布“开源雨林”计划。

Alluxio 与金山云达成合作,携手优化存算分离与湖仓一体架构

2022-02-16
阅读 2 分钟
1.4k
近日,全球首创的超大规模分布式数据编排软件开发商 Alluxio 与金山云达成合作,双方将共同探索数据编排技术在存算分离与湖仓一体等大数据应用趋势下的产品集成方案和实践场景,助力企业客户开展更为灵活及高效的大数据业务,以实现数据收益最大化。

Alluxio 2022 财年业务发展迅猛,全球市值前十企业有七家在使用 Alluxio

2022-02-11
阅读 2 分钟
826
近日,全球首创的超大规模分布式数据编排软件开发商 Alluxio 宣布,其在刚刚过去的 2022 财年(2021年2月1日至2022年1月31日)业务发展势头迅猛,财年营收同比增长3倍,并获得战略头部客户认可,完成新一轮融资,开启全球业务拓展并加速产品迭代。全球市场趋势表明,随着企业转向混合云和多云的工作负载,对 Alluxio 数...
封面图

Alluxio 与阿里云正式达成技术合作

2022-02-11
阅读 2 分钟
1.1k
近日,开源云数据编排软件开发商 Alluxio 与阿里云达成技术合作,其核心产品 Alluxio 数据编排平台将与阿里云云原生数据仓库 AnalyticDB 集成,有效解决存储计算分离场景下从异构数据源读取数据带来的性能损耗。相较存储和计算耦合的架构,Alluxio 数据编排技术产品基于存储计算分离架构。存储计算分离可以带来诸多好处...
封面图