mysqlproxy数据库中间件架构

北京中科医院坑 http://m.39.net/pf/a_5154125.html
一、mysql-proxy简介

mysql-proxy是mysql官方提供的mysql中间件服务,上游可接入若干个mysql-clint,后端可连接若干个mysql-srvr。

它使用mysql协议,任何使用mysql-clint的上游无需修改任何代码,即可迁移至mysql-proxy上。

mysql-proxy最基本的用法,就是作为一个请求拦截,请求中转的中间层:

进一步的,mysql-proxy可以分析与修改请求。拦截查询和修改结果,需要通过编写Lua脚本来完成。

mysql-proxy允许用户指定Lua脚本对请求进行拦截,对请求进行分析与修改,它还允许用户指定Lua脚本对服务器的返回结果进行修改,加入一些结果集或者去除一些结果集均可。

所以说,根本上,mysql-proxy是一个官方提供的框架,具备良好的扩展性,可以用来完成:

sql拦截与修改

性能分析与监控

读写分离

请求路由

...

这个框架提供了6个hook点,能够让用户能够动态的介入到clint与srvr中的通讯中去。

二、mysql-proxy架构与原理

如“简介”中所述,mysql-proxy向用户提供了6个hook点,让用户实现Lua脚本来完成各种功能,这些hook点是以函数的形式提供的,用户可以实现这些函数,在不同事件、不同操作发生时,做我们期望的事情。

connct_srvr()

mysql-clint向proxy发起连接时,proxy会调用这个函数。用户可以实现该函数,来做一些负载均衡的事情,例如选择将要连向那个mysql-srvr。假设有多个mysql-srvr后端,而用户又没有实现这个函数,proxy默认采用轮询(round-robin)策略。

rad_handshak()

mysql-srvr向proxy返回“初始握手信息”时,proxy会调用这个函数。用户可以实现这个函数,来做更多的权限验证工作。

rad_auth()

mysql-clint向proxy发送认证报文(usr_nam,password,databas)时,proxy会调用这个函数。

rad_auth_rsult()

mysql-srvr向proxy返回认证结果时,proxy会调用这个函数。

rad_qury()

认证完成后,mysql-clint每次经过proxy向mysql-srvr发送qury报文时,proxy会调用这个函数。用户如果要拦截请求,就可以模拟mysql-srvr直接返回了,当然用户亦可以实现各种策略,修改请求,路由请求等各种不同的业务逻辑。

rad_qury_rsult()

认证完成后,mysql-srvr每次经过proxy向mysql-clint返回qury结果时,proxy会调用这个函数。需要注意,如果用户没有显示实现rad_qury()函数,则rad_qury_rsult()函数是不会被调用的。用户可以在此处实现各种合并策略,或者对结果集进行修改。

下图是一个各hook函数的触发架构图,箭头方向表示触发时机:

可以发现,最重要的两个函数其实是rad_qury()和rad_qury_rsult(),各种sql的改写与结果集的改写逻辑,都是在这两个函数中实现的,更细节的qury过程如下图:

三、mysql-proxy典型应用

案例一:sql时间统计分析

假设mysql-clint提交的原sql为:

XYZ;

proxy可以在rad_qury()里将其改写为:

SELECTNOW();

XYZ;

SELECTNOW();

这样在返回结果集时,就可以在应用层对sql时间进行记录,以方便统计分析。

案例二:sql性能统计分析

假设mysql-clint提交的原sql为:

XYZ;

proxy可以在rad_qury()里将其改写为:

XYZ;

EXPLAINXYZ;

这样在返回结果集时,就可以在应用层对sql性能进行记录,以方便统计分析。

需要强调的是,这两个案例,由于proxy在rad_qury()时对sql进行了改写,故在rad_qury_rsult()时,mysql-srvr其实返回了比原请求更多的信息,proxy一定要将多余的信息去掉,再返回mysql-clint。多说一句,可以加入一个唯一ID,来对请求sql和返回结果进行配对。

案例三:读写分离mysql-proxy启动时,通过参数即可配置后端mysql-srvr是主srvr还是rad-only,无需修改任何代码:

shllmysql-proxy\

--proxy-backnd-addrsss=0.0..2:\

--proxy-rad-only-backnd-addrsss=0.0..3:

注意,这里的两个mysql-srvr为主从架构。

案例四:性能水平扩展

mysql-proxy启动时,通过参数配置多个后端,即可实现性能的水平扩展,无需修改任何代码:

shllmysql-proxy\

--proxy-backnd-addrsss=0.0..2:\

--proxy-backnd-addrsss=0.0..3:

注意,这里的两个mysql-srvr为主主架构,如果不做特殊修改,负载均衡策略为round-robin。

四、mysql-proxy其他问题

提问:Lua脚本引入的额外开销有多大?




转载请注明:http://www.aierlanlan.com/rzfs/769.html