跑批任务分批取数.使用rowid效率太低. 执行缓慢

rowid查询场景:对一个有128个分区的hash分区表大并发查询,查询条件是根据rowid进行范围查询,涉及到查询的所有分区;跑批程序并发上来之后,那么就会把单个节点的cpu打爆

2 个赞

学习了

2 个赞

程序可以多线程,每个线程处理一个分区( `from t1 partition (pX) ) ,这样效率应该更高一些。

2 个赞