小米开源数据库中间件gaea

简介

Gaea是小米商城/系统组研发的基于mysql协议的数据库中间件,目前在小米商城大陆和海外得到广泛使用,包括订单、社区、活动等多个业务。Gaea支持分库分表、sql路由、读写分离、连接池等基本特性,下面有列出一个大致的功能列表。

项目背景

小米商城之前存在了mycat、cobar、kingshard还有haproxy等几款中间件和tcp代理,配置比较分散,DBA很难管理,具有潜在的隐患。所以,我们在18年下半年立项gaea这个项目,希望能统一以上几个组件,打造自动化的mysql服务平台。同时,为了尽可能小的影响线上业务,我们选择兼容以前的分库、分表路由方案,同时提供了一系列验证工具、配置转换工具。

Gaea在设计阶段借鉴了市面上已经开源的mysql中间件项目,包括vitess、kingshard、mycat等,并采用了tidb sqlparser作为sql解析器,在此也对以上项目表示诚挚感谢。

以下是gaea功能和架构的简单介绍,具体信息可以到gaea官方repo查看。

功能列表

基础功能

  • 多租户

  • SQL透明转发

  • 慢SQL指纹

  • 错误SQL指纹

  • 注解路由

  • 慢日志

  • 读写分离,从库负载均衡

  • 自定义SQL拦截与过滤

  • 连接池

  • 配置热加载

  • IP/IP段白名单

  • 全局序列号

分库、分表功能

  • 分库: 支持mycat分库方式

  • 分表: 支持kingshard分表方式

  • 聚合函数: 支持max、min、sum、count、group by、order by等

  • join: 支持分片表和全局表的join、支持多个分片表但是路由规则相同的join

架构图

微信群

最后

本着取之社区、反馈社区的宗旨,我们决定把gaea开源出去,希望在一定的场景下可以解决大家的问题,也欢迎大家关注、参与gaea项目,谢谢。