2. 旁路导入(Direct Load)技术实现 HTAP 一体化,一张表同时扛高并发交易与 PB 级分析写入
传统 HTAP 架构常面临“TP 影响 AP”或“AP 拖慢 TP”的困境。OceanBase 通过 **旁路导入(Direct Load)** 技术,在 LSM-Tree 存储架构基础上,绕过常规事务路径,直接将批量数据构建成 SSTable 文件写入存储层,从而实现同一张表同时支持高并发 TP 写入与 PB 级 AP 数据快速导入。
- 技术优势:
- 高性能:在 ClickBench 基准测试中达到主流 OLAP 数据库性能水平,数据导入速度提升 5-10 倍。
- 强一致:生成的 SSTable 仍通过 Paxos 协议同步多副本,确保 RPO=0,任一节点故障数据不丢失。
- 资源隔离:导入过程利用独立线程池和 PX 并行框架,避免对在线交易造成阻塞。
- 适用场景:
- 实时数仓:每日 TB 级日志数据快速入湖,同时不影响核心交易系统。
- 大促对账:双11后海量订单数据秒级导入,支撑分钟级对账分析。
- 物联网平台:百万级设备上报数据批量写入,同时支持实时查询最新状态。