|
https://segmentfault.com/a/1190000015766938?utm_source=tag-newest
https://howtoprogram.xyz/2016/09/25/spring-kafka-multi-threaded-message-consumption/
今日leader提到了kafka的顺序消费问题不会满足mysql与gp的不同并发需求,满足不了多分区消费时候顺序读写问题。方案不通过,因此采用其他部门的任务调度框架。
leader决定让我学一个调度sql的任务框架,这样能保证顺序读写(也就是队列FIFO方式)。
目前实现了,用的redis作队列缓存,然后多线程调度,druid做连接池。 |