SOAR工具：小米正式开源 SQL 智能优化与改写工具

近日，小米正式宣布开源 SOAR。

截至本日，该项目已取得了 350 个「star」和 44 个「fork」（GitHub项目地址：https://github.com/XiaoMi/soar）

SOAR 简介

SOAR，即 SQL Optimizer And Rewriter，是一款 SQL 智能优化与改写工具，由小米运维 DBA 团队出品

SOAR 体系架构

SOAR主要由语法解析器，集成环境，优化建议，重写逻辑，工具集五大模块组成。

语法解析和语法检查

一条SQL从文件，标准输入或命令行参数等情势传递给SOAR后首先进入语法解析器，选用了vitess的语法解析库作为SOAR的语法解析库，但随时需求的不断增加我们发现有些复杂需求使用vitess的语法解析实现起来比较逻辑比较复杂。因而参考业办其他数据库产品，因而引入了TiDB的语法解析器做为补充。后来发现这两个解析库还存在一定的盲区，因而又引入了MySQL履行返回结果作为多多版本SQL方言的补充。大家也能够看到在语法解析器这里，SOAR的实现方案是疏松的、可插拔的。SOAR其实不直接保护庞大的语法解析库，它把各种优秀的语法解析库集成在一起，各取所长。

集成环境

集成环境辨别线上环境和测试环境两种，分别用于解决区别场景下用户的SQL优化需求。一种常见的情况是已有表结构需要优化查询SQL的场景，可以从线上环境导出表结构和足够的采样数据到测试环境，在测试环境上就能够放心的履行各种高危操作而不用担心数据被破坏。另外一种常见的情况是建一套全新的数据库，需要验证提供的数据字典中会不会存在优化的可能。对这类情况，很有可能你不需要知道线上环境在哪儿，完全只是想先试试看，如果报错了马上改对就是了。固然还有更多种组合的场景需求，将在集成环境一单分类说明。

优化建议

目前SOAR可以提供的优化建议有基于启发式规则(通常也称之为经验)的优化建议，基于索引优化算法给出的索引优化建议，和基于EXPLAIN信息给出的解读。

重写逻辑

上面提到的优化建议是初期实现的主要功能，初期的功能还只是停留在建议上，对一些低级用户看到建议也不一定会改写。为了进一步简化SQL优化的本钱，SOAR又进一步发掘了自动SQL重写的功能。现在提供几十种常见场景下的SQL等价转写，不过相比SQL优化建议还有很大的改进空间。这部份的功能和逻辑将在重写逻辑一章中详细说明。

工具集

除SQL优化和改写之外，为了方便用户使用和美化输出展现情势，SOAR还提供了一些辅助的小工具，比如markdown转HTML工具，SQL格式化输出工具等等。你可以在经常使用命令中找到这些小工具的使用方法。

SOAR 功能特点

SOAR的功能特点以下：

● 跨平台支持（支持Linux, Mac环境，Windows环境理论上也支持，不过未全面测试）
● 支持基于启发式算法的语句优化
● 支持复杂查询的多列索引优化（UPDATE, INSERT, DELETE, SELECT）
● 支持EXPLAIN信息丰富解读
● 支持SQL指纹、紧缩和美化
● 支持同一张表多条ALTER要求合并
● 支持自定义规则的SQL改写

另外，小米的SOAR与业内其他优秀产品对照，也有着非常大的优势：