Doris 查询正确性问题排查指南

1. 获取用户表的 schema：

• 表类型（Dup 表 Unique 表）。
• 如果是 Unique 表，判断是 MoR 还是 MoW。
• 是否使用了 sequence 列。

2. 确认操作：

• 导入方式及参数
• 用户是否执行过删除操作（如 DELETE
   语句或 delete sign
   导入）。

3. 确认问题类型及 SQL：

• 查询结果是否符合预期？
• 查询结果是否出现跳变？
• 数据条数是否少于预期？

• 存储层问题的判断条件：

1. 执行 SELECT COUNT(*)
   （无 WHERE 条件），数据少于导入的数据量。
2. 修改 use_fix_replica
    的 session 变量为 0/1/2，若查询结果行数不同，则说明多副本不一致。
3. 三副本行数一致，但某些 key 的内容在副本中不同。

• 查询层问题： 以上条件都不符合时，那就是查询层的问题了。

1. 检查使用的版本：

• 版本 1.2.x：升级到 1.2最新版本。
• 版本 2.0.x：若低于 2.0.4，建议升级到2.0最新版本。
• 版本 2.1.x：若使用了列更新功能，建议升级到 2.1最新版本。

2. 定位有问题的副本：

• 修改 use_fix_replica
   为 0/1/2，分别执行查询：

  SELECT ${keys}, COUNT(*) a FROM ${table} GROUPBY ${keys} HAVING a > 1;
  
  

• 找到有重复 key 的副本，记录问题数据和相关信息。

3. 获取 Debug 数据：

• 获取有问题的 key 对应的导入版本：

  SET show_hidden_columns = TRUE;
  SELECT ${keys}, __DORIS_VERSION_COL__ FROM ${table} WHERE ${keys} = xxx;
  
  

• 查找有问题的 tablet id：

  EXPLAINSELECT ${keys}, __DORIS_VERSION_COL__ FROM ${table} WHERE ${keys} = xxx;
  
  

4. 收集日志和 compaction 状态。

• 日志主要是fe.log 和 be.INFO

• 查看compaction状态

  //查看某个 BE 节点总体的 compaction 状态
  GET api/compaction/run_status 
  //查看指定 tablet 的 compaction 状态。
  GET api/compaction/show?tablet_id={int}
  

往期推荐