其他业务部门都有各自的团队做画像,当时画像使用的ES存储,调研之后,最终决定使用redis(考虑到
roaringbitmap的空间,聚合等优势)申请5台redis集群,两主三从。总存储是 600G,实际使用是480G左右。
从上游算法端接受JMQ用户标签数据,灌注到redis。当时做的双主单写,另外一主主要用来容灾用。用户标签
数据大概30亿左右,JMQ读峰值大概是300K/S。
项目后期迭代升级规划是使用clickhouse替换redis方案
点击空白处退出提示
其他业务部门都有各自的团队做画像,当时画像使用的ES存储,调研之后,最终决定使用redis(考虑到
roaringbitmap的空间,聚合等优势)申请5台redis集群,两主三从。总存储是 600G,实际使用是480G左右。
从上游算法端接受JMQ用户标签数据,灌注到redis。当时做的双主单写,另外一主主要用来容灾用。用户标签
数据大概30亿左右,JMQ读峰值大概是300K/S。
项目后期迭代升级规划是使用clickhouse替换redis方案
评论