迁移数据方案

我们在做系统的时候,有时候会遇到迁移数据或者处理任务(任务量又比较大),比如把redis的数据取出来做一些操作,然后处理完的数据在存到hbase 我们需要考虑到数据处理过程中失败情况,需要处理高并发去执行,具体怎么设计,怎么做呢, 有一种简单的方式如下: 1我们先把任务数据存到redis任务队列里 2定义一个bean启动3个线程来处理    线程1的:从任务队列取出数据,同时存到备份队列,用red
相关文章
相关标签/搜索