企业中项目日志数较多 储存处理方式elk和mysql哪种方式更合适?

博主工作的一个项目里用了elk来存储用户操作日志,日志量大概是每天一千万左右的数据,最近服务器的磁盘被塞满了   本想将时间较长的数据删除掉   但当时删除总是出现版本冲突的错误 并且es在单个索引数据达到 亿级以上的时候查询时间也是不乐观的 于是乎博主花了点时间将es的日志数据全部查询出来    准备将这些数据包括以后的日志数据都存储到mysql中      博主的日志都是先全部存入kafka然
相关文章
相关标签/搜索