OBCP之多看多练–32

培训 & 考证
#1

使用 OceanBase 插件的 DataX，可以在其任务配置文件中设置哪些参数来提升数据处理的速率？
​​A. writerThreadCount​​
B. batchsize​​
C. channel​​
D. splitPk​​

答案：ABCD
要是做得不对，请各位网友纠正。
祝各位大佬OBCP早日到手

1 个赞
#2

选择ABCD

  • writerThreadCount（A）

  • 控制写入端的并发线程数，提升向 OceanBase 写入数据的并发度。

  • 线程数越多，写入吞吐量越高（需结合数据库性能上限调整）。

  • batchsize（B）

  • 控制单次批量提交的记录数，减少数据库交互次数，大幅降低 IO 开销。

  • 调大批次可显著提升写入效率（需避免过大导致事务超时）。

  • channel（C）

  • 控制 DataX 任务的整体并发通道数，决定了读取 + 处理 + 写入的整体并行度。

  • 通道数越高，整体处理能力越强（需匹配源端和目标端的负载能力）。

  • splitPk（D）

  • 用于指定数据切分的主键 / 分片键，DataX 会基于该字段将数据拆分成多个并行读取任务。

  • 开启后可实现多线程并行读取源端数据，大幅提升整体处理速度。