Roaringbitmap是一种高效的Bitmap压缩算法。Bitmap位计算非常适合大数据基数计算,常用于去重、标签筛选、时间序列等计算中。GPDB-roaringbitmap插件将Roaringbitmap功能集成到Greenplum数据库中,将Roaringbitmap作为一种数据类型提供原生的数据库函数、操作符、聚合等功能支持。

gpdb-roaringbitmap在v0.2.65.1 版本中,添加二阶聚合,在部分特定场景下性能提升20倍。

插件的新版本v0.2.66中,修复了聚合结果错误的bug,建议所有历史版本用户进行更新。

  • 此版本只支持GPDB6。
  • 更新Croaring版本到0.2.66,解决在特定情况下内存泄漏的问题。
  • 修复在bitmap个数非常少的情况下,聚合函数 rb_and_agg,rb_and_cardinality_agg 结果错误的问题。
  • 我们建议所有历史版本的用户都进行更新。

升级方法:

make
make install
psql -c "alter extension roaringbitmap update;"

关于本项目更多信息,请访问项目首页

关于本项目的应用案例,请参考Greenplum在TalkingData的应用实践

获得更多关于Greenpum的技术干货,请访问Greenplum中文社区网站

在这里插入图片描述


Greenplum
156 声望69 粉丝

Greenplum 是全球领先的开源、多云大数据分析平台,被广泛运用于大规模商业智能和分析中,具有极高的稳定性。