PB级数据实时查询架构设计

1、垂直拆分 一、根据业务不一样拆分红多个es集群:好比日志集群、binglog集群、业务数据集群等前端 二、根据系统等级不一样拆分不一样配置的es集群缓存 三、统一封装数据平台层,数据插入和查询使用统一的封装平台,避免过多系统链接es集群,同时避免写入量过大拖垮集群性能优化 四、冷热数据分离架构 五、数据统一从kafka进入,避免进入量较大,消费方瓶颈分布式     2、查询优化 这个问题说白了
相关文章
相关标签/搜索