SF
OPPO数智技术
OPPO数智技术
注册登录
关注博客
注册登录
主页
关于
RSS
OPPO基于Apache Flink的实时数仓实践
OPPO数智技术
2020-03-10
阅读 8 分钟
4.1k
本文来自 OPPO 大数据平台研发负责人张俊在 Flink Forward Asia上的分享。OPPO 基于 Apache Flink 构建实时数仓,在数据规模上单日总数据处理量超 10 万亿,峰值大概超过每秒 3 亿。本文内容分为以下四个方面:
大数据存储格式的进化之旅
OPPO数智技术
2020-01-09
阅读 3 分钟
1.5k
“数据量大什么的怕你呀,数据格式什么的, 赶紧放进来就是了;别管了,就就就那个csv吧,快糙猛搞起来呀,大不了读的时候再解析校验啥的,读时校验(schema on read)有木有”