请问DISTRIBUTED TABLE RANGE SCAN 和 TABLE RANGE SCAN 的区别是什么？

OceanBase 技术问题
#1

【 使用环境 】测试环境
【 OB or 其他组件 】OB
【 使用版本 】4.2.1
【问题描述】请教下，DISTRIBUTED TABLE RANGE SCAN 和 TABLE RANGE SCAN 的区别是什么？这里DISTRIBUTED该怎么理解呢，是指取数据分布到多个节点？

1 个赞
#3
  1. DISTRIBUTED TABLE RANGE SCAN（分布式表范围扫描）：

分布式表范围扫描是指在分布式环境下，针对整个分布式表进行的范围扫描。在这种扫描方式下，OceanBase 会根据分区键将数据分布在多个节点上，并且在每个节点上执行范围扫描操作。这种方式可以充分利用集群的计算和存储资源，提高查询性能。

  1. TABLE RANGE SCAN（表范围扫描）：

表范围扫描是指在一个单个的表上进行范围扫描。这种扫描方式通常用于非分布式环境或者只涉及到一个分区的数据查询。在这种情况下，查询只会在一个节点上执行。

1 个赞
#4

表没有建立分区，即不是分区表，也会是DISTRIBUTED TABLE RANGE SCAN吗？为什么呢

1 个赞
#7

不同场景，分布式 or 其他 ？

1 个赞
#8

分布式的部署场景

1 个赞
#9

有可能和第一个算子的表不在同一个ob节点上出现了跨机扫描

2 个赞
#10

分布式表扫描和普通的表扫描

#11

好问题 等我搭建了集群来测试下

#12

这里的表扫描，是不是表述为索引扫描，更准确一点呢 ？ @论坛小助手

#13

DISTRIBUTED TABLE RANGE SCAN 与 TABLE RANGE SCAN 的区别

根据您的描述，您是想了解在 OceanBase 中 DISTRIBUTED TABLE RANGE SCAN 和 TABLE RANGE SCAN 之间的区别，以及在什么样的情况下会发生这些扫描方式。我将基于现有知识对您的问题进行解答。

1. 定义上的区分

  • TABLE RANGE SCAN：这是指在一个表上执行的范围扫描，通常这种扫描是在单个节点上完成的。如果查询涉及的表数据全部位于一个节点或分区中，那么 OB 可能会选择使用 TABLE RANGE SCAN。
  • DISTRIBUTED TABLE RANGE SCAN：这是一种在分布式环境下执行的范围扫描，意味着数据分散存储于多个节点上。在这种情况下，OB 需要从不同的节点（可能包括多个副本）收集数据片段，然后合并结果返回给用户。因此，这里“DISTRIBUTED”的含义确实是指数据分布在不同节点，并且需要跨节点协调来完成整个查询过程。

2. 关于非分区表是否会触发 DISTRIBUTED TABLE RANGE SCAN

即使表没有被显式地定义为分区表，在分布式数据库系统如 OceanBase 中，每个表的数据也会根据某种规则（比如哈希分布策略）自动分布到集群中的不同节点上去。这意味着即使对于非分区表，只要它的数据量足够大以至于跨越了多个节点，则针对该表的查询也可能涉及到多节点间的协作，从而导致 DISTRIBUTED TABLE RANGE SCAN。

3. “表扫描”与“索引扫描”

在数据库领域，“表扫描”通常指的是直接读取表中的所有行或特定范围内行的操作；而“索引扫描”则是指通过索引来定位并读取记录的过程。当提到 RANGE SCAN 时，这通常暗示着查询条件允许使用索引来加速搜索过程。因此，虽然术语“表扫描”被用来描述基本概念，但实际操作更倾向于利用索引结构来进行高效的检索。如果查询计划中提到了RANGE SCAN，那很可能意味着正通过索引来访问数据，而不是全表扫描。

总结

  • DISTRIBUTED TABLE RANGE SCAN 和 TABLE RANGE SCAN 的主要区别在于是否涉及跨多个节点的数据检索。
  • 即使是非分区表，如果其数据分布于多个节点之上，仍有可能触发 DISTRIBUTED TABLE RANGE SCAN。
  • 当讨论 RANGE SCAN 时，更多是指通过索引而非直接扫描表的方式进行数据检索。

希望以上信息能帮助您更好地理解这两种扫描方式及其应用场景！如果有进一步的问题或其他相关议题需要探讨，请随时告知。

#14

即使普通表，在分布式数据库系统如 OceanBase 中，每个表的数据也会根据某种规则（比如哈希分布策略）自动分布到集群中的不同节点上去。那这个普通表，在这多个节点都有一个tablet和这个表对应？多个节点上的tablet合起来就是这个普通表？@论坛小助手

#15

根据文档中的信息，我可以为您解答关于普通表在OceanBase分布式数据库系统中的数据分布情况。

普通表的数据分布

  1. 普通表的数据分布：

    • 在OceanBase中，每个租户由若干个Unit组成。日志流根据一定的规则分布于这些Unit上，从而决定了归属于日志流的数据分区在Unit上的分布。
    • 普通表由一个分区组成，可以看做是分区表的一个特例。这个分区会被分配到集群中的某个节点上，并且会在多个节点上创建副本以保证高可用性。

  2. Tablet的概念：

    • Tablet是OceanBase中用于存储数据的基本单位。每个分区对应一个Tablet。
    • 即使是一个普通表（单分区表），它也会被分配一个Tablet。这个Tablet会存储在集群中的某个节点上，并且会在其他节点上创建副本以确保数据的高可用性和一致性。

  3. 多个节点上的Tablet：

    • 对于普通表，虽然它只有一个分区（即一个Tablet），但这个Tablet会在多个节点上创建副本。具体来说，同一个日志流的数据会被拷贝到多个机器上，形成多个副本（Replica）。
    • 这些副本使用Paxos一致性协议来保证强一致性。其中一个副本为主副本（Leader），具备强一致性读和写能力；其他副本为从副本（Follower），具备弱一致性读能力。

  4. 多个节点上的Tablet合起来就是这个普通表：

    • 从逻辑上看，一个普通表的所有数据都存储在一个Tablet中。
    • 从物理上看，这个Tablet会在多个节点上创建副本，以保证数据的高可用性和一致性。
    • 因此，多个节点上的Tablet副本合起来构成了这个普通表的数据分布。

总结

  • 普通表的数据分布：普通表由一个分区（一个Tablet）组成，这个Tablet会被分配到集群中的某个节点上。
  • Tablet的副本：为了保证高可用性和一致性，这个Tablet会在多个节点上创建副本。
  • 逻辑与物理视图：从逻辑上看，普通表的所有数据都在一个Tablet中；从物理上看，这个Tablet会在多个节点上创建副本。

希望以上信息能帮助您更好地理解普通表在OceanBase中的数据分布情况。如果您还有其他问题，请随时告知！

依据的文档片段：

更多信息请查看:

  1. 分布式数据库对象概述
  2. 表组
  3. 数据分布
  4. 表概述
  5. 分布式执行和并行查询
  6. 表存储
  7. 日志流和副本概述