OPPO基于Apache Flink的实时数仓实践

2020-03-10
阅读 8 分钟
4.1k
本文来自 OPPO 大数据平台研发负责人张俊在 Flink Forward Asia上的分享。OPPO 基于 Apache Flink 构建实时数仓,在数据规模上单日总数据处理量超 10 万亿,峰值大概超过每秒 3 亿。本文内容分为以下四个方面:

大数据存储格式的进化之旅

2020-01-09
阅读 3 分钟
1.5k
“数据量大什么的怕你呀,数据格式什么的, 赶紧放进来就是了;别管了,就就就那个csv吧,快糙猛搞起来呀,大不了读的时候再解析校验啥的,读时校验(schema on read)有木有”