列存索引使用说明

列存索引的目标是提供一个最简单的方案，对业务中复杂耗时的SQL语句进行提速。您可以参考基础使用说明中的内容为集群配置HTAP负载处理能力。除此之外，列存索引还提供了高阶定制优化功能以满足业务负载的特殊需求，您可以参考进阶使用说明中的内容来优化列存索引。

基础使用说明

您可以按照以下步骤为集群配置HTAP负载处理能力。

1. 在PolarDB集群中添加只读列存节点。

2. 根据业务需求，配置行列自动分流或配置行列手动分流。

3. 连接数据库集群，使用DDL语句为业务表增加或删除列存索引，并使用Explain对执行计划进行调优。具体操作请参见以下文档：

• 建表时创建列存索引的DDL语法

• 动态增加或删除列存索引的DDL语法

• 使用Explain分析SQL执行计划

进阶使用说明

您可以参考以下内容来优化列存索引。

• 指定列索引按某一列进行排序，以提高查询的IO效率。具体操作请参见设置列索引的排序键。

• 列索引结合虚拟列对JSON字段进行高效分析。具体操作请参见如何对JSON类型进行高效分析。

• 使用列索引加速ETL过程。具体操作请参见使用列索引加速ETL。

• 加速访问OSS外表。具体操作请参见分析外部OSS上的数据。

• 使用Serverless降低负载峰谷差较大的业务场景下的使用成本。具体操作请参见列存节点开启Serverless。

• 对于大宽表，可以使用Hybrid Plan来加速宽表查询。具体操作请参见使用Hybrid Plan加速宽表查询。

• 对于海量数据的复杂查询，可以使用多机MPP进行查询加速。具体操作请参见使用多机MPP对海量数据分析提速。

• 其他

  如果您对列存索引背后的原理感兴趣，您可以参考以下文档来进一步了解列存索引：

  • PolarDB IMCI发表在SIGMOD2023上的论文

  • 列存索引技术白皮书

  • 列存索引技术架构介绍

  • 列存索引中TopK算子的实现

  • 列存索引中HashMatch算子的实现

  • 列存索引中GroupJoin算子的实现

  • 列存索引如何实现高效数据过滤