关于旁路导入数据问题咨询

【 测试环境 】
【 OB 】
【 4.2.1.8 】
【问题描述】
关于旁路导入有以下几个问题要咨询,辛苦各位老师看下哈
1.使用obloader工具从客户端访问ODP模式,进行旁路导入会消耗OB集群本身的资源吗,会对集群本身造成大的负担吗

2.使用工具和 LOAD DATA 语句旁路导入数据推荐哪种方式?个人理解是不是把数据直接放到server效率会高?

  1. LOAD DATA 语句旁路导入数据目前只支持csv格式文件吗
  1. OB 集群在处理导入操作时,会消耗 CPU 和内存资源,如果并发操作过多,可能会影响集群的响应时间和性能。数据导入需要对存储进行读写操作,可能导致 I/O 瓶颈,尤其是在高并发的情况下。
1 个赞

如果你需要导入大量数据,建议使用 LOAD DATA 语句,并将数据文件直接上传到服务器,通常能获得更好的性能。对于小数据量或需要可视化操作的情况,可以选择使用数据库工具。
3.应该是仅支持csv文件,你可以测试一下

100GB大小的推荐使用工具还是load data

obloader目前已经很成熟了,大数据量也可以使用

1 个赞