|
ThinkPHP内置了分布式数据库的支持,包括主从式数据库的读写分离,但是分布式数据库必须是相同的数据库类型。 配置DB_DEPLOY_TYPE 为1 可以采用分布式数据库支持。如果采用分布式数据库,定义数据库配置信息的方式如下: - <?php
! g$ A- z4 y7 ]0 j$ \/ q - return array(2 F4 N0 F+ t! V& r& B Q
- 'DB_DEPLOY_TYPE' => 1, // 设置分布式数据库支持
& p+ g: X$ m( F( U/ j4 @ - 'DB_RW_SEPARATE' => true, // 分布式数据库的读写是否分离. `6 s# o* Z& v; h* @; H, k
- 'DB_TYPE' => 'mysql', // 数据库类型
6 I5 D& A/ ~5 f+ `, f - 'DB_HOST' => '192.168.33.110,192.168.33.111,192.168.33.112', // 数据库服务器地址
1 r4 V. a2 s% C9 J - 'DB_NAME' => 'kp_account', // 数据库名称
L! R+ R* i" U - 'DB_USER' => 'root,root,root', // 数据库用户名
$ r+ i0 f, c; }' A; i) G - 'DB_PWD' => '', // 数据库密码
' _% B9 [$ A1 K+ B# h O3 p - 'DB_PORT' => '3306,3306,3306', // 数据库端口" ?' d- M" u! U0 v
- 'DB_PREFIX' => 'acc_', // 数据表前缀
. X* \& B$ V8 f8 W, o+ m4 { - 'DB_MASTER_NUM' => 28 A( b2 y2 w; H% r" t8 q
- );
复制代码 ( Q% d1 i) @& w) l
在读写分离的情况下,默认第一个数据库配置是主服务器的配置信息,负责写入数据,如果设置了DB_MASTER_NUM参数,则可以支持多个主服务器写入。其它的都是从数据库的配置信息,负责读取数据,数量不限制。每次连接从服务器并且进行读取操作的时候,系统会随机进行在从服务器中选择。 还可以设置DB_SLAVE_NO 指定某个服务器进行读操作。 小结: TP框架内置的分布式数据库处理,在默认的情况下,如果没有设置DB_MASTER_NUM参数,就会是默认第一个数据库作为写操作,其他是读数据库;如果设置了DB_MASTER_NUM参数,例如上面的数据库配置信息里面把DB_MASTER_NUM参数设置为2,在没有并发的情况下,写操作一直会是192.168.33.111这个数据库;有不对的地方还望多多指教! ----------------------------------------------------------------------------------------------------------------------------------------------------[color=rgba(0, 0, 0, 0.87)]ThinkPHP内置了分布式数据库的支持,包括主从式数据库的读写分离,但是分布式数据库必须是相同的数据库类型。 [color=rgba(0, 0, 0, 0.87)]配置DB_DEPLOY_TYPE 为1 可以采用分布式数据库支持。如果采用分布式数据库,定义数据库配置信息的方式如下:
( X$ U- D/ e$ p3 C- //分布式数据库配置定义6 f3 S, ]. I- W
- 'DB_DEPLOY_TYPE'=> 1, // 设置分布式数据库支持
0 e0 L' Q- I- N# o, u% I1 j - 'DB_TYPE' => 'mysql', //分布式数据库类型必须相同9 A' n" N' @ ?; G" v
- 'DB_HOST' => '192.168.0.1,192.168.0.2',
6 Y g' Q6 q2 e& a - 'DB_NAME' => 'thinkphp', //如果相同可以不用定义多个% _$ Q. B3 T* J; U. x
- 'DB_USER' => 'user1,user2',% c" Y# _. b" N9 P! W2 u4 _1 V* ^
- 'DB_PWD' => 'pwd1,pwd2',( n5 { N, \( t# p
- 'DB_PORT' => '3306',- M, h0 `7 D( l( ?4 [, r
- 'DB_PREFIX' => 'think_',
复制代码 [color=rgba(0, 0, 0, 0.87)]连接的数据库个数取决于DB_HOST定义的数量,所以即使是两个相同的IP也需要重复定义,但是其他的参数如果存在相同的可以不用重复定义,例如:) w6 W/ G- E1 F" V3 J. p
; C# H# u3 B2 Y+ b S7 p1 @: |9 A% n[color=rgba(0, 0, 0, 0.87)]和
) P! R. p7 U6 v% S" \0 d[color=rgba(0, 0, 0, 0.87)]等效。3 p( T9 |; G* X6 i+ C
- 'DB_USER'=>'user1', 4 M4 C- p% S+ ] H( t9 U! `
- 'DB_PWD'=>'pwd1',
复制代码 [color=rgba(0, 0, 0, 0.87)]和. R/ s- [! ~- L8 ^; f) T
'DB_USER'=>'user1,user1', 'DB_PWD'=>'pwd1,pwd1',2 E5 o- u4 G7 U5 `) [+ ]
[color=rgba(0, 0, 0, 0.87)]等效。 [color=rgba(0, 0, 0, 0.87)]还可以设置分布式数据库的读写是否分离,默认的情况下读写不分离,也就是每台服务器都可以进行读写操作,对于主从式数据库而言,需要设置读写分离,通过下面的设置就可以: [color=rgba(0, 0, 0, 0.87)]在读写分离的情况下,默认第一个数据库配置是主服务器的配置信息,负责写入数据,如果设置了DB_MASTER_NUM参数,则可以支持多个主服务器写入。其它的都是从数据库的配置信息,负责读取数据,数量不限制。每次连接从服务器并且进行读取操作的时候,系统会随机进行在从服务器中选择。 [color=rgba(0, 0, 0, 0.87)]还可以设置DB_SLAVE_NO 指定某个服务器进行读操作 [color=rgba(0, 0, 0, 0.87)]3.2.3版本开始,如果从数据库连接错误,会自动切换到主数据库连接。
$ b& t$ U$ d/ e7 Z) a. U[color=rgba(0, 0, 0, 0.87)]调用模型的CURD操作的话,系统会自动判断当前执行的方法的读操作还是写操作,如果你用的是原生SQL,那么需要注意系统的默认规则: [color=rgba(0, 0, 0, 0.87)]写操作必须用模型的execute方法,读操作必须用模型的query方法[color=rgba(0, 0, 0, 0.87)],否则会发生主从读写错乱的情况。% L' E' o- K* @: T+ g3 X8 m$ m
0 R" A' {7 Y! s注意:主从数据库的数据同步工作不在框架实现,需要数据库考虑自身的同步或者复制机制。
3 m" W9 z) q3 T2 J8 l. @+ c8 h----------------------------------------------------------------------------------------------------------------------------------------------------
9 @0 |/ W( h: Q* q6 k2 k! y J1 F1.分布式数据库是什么: tp的分布式数据库主要是通过该配置: 'DB_DEPLOY_TYPE' => 1,// 数据库部署方式:0 集中式(单一服务器),1 分布式(主从服务器) 2.主从服务器的读写分离是什么: 主从数据库即为一个主数据库会有对应n个从数据库,而从数据库只能有一个对应的从数据库。主从数据库中写的操作需要使用主数据库,而读操作使用从数据库。主数据库与从数据库始终保持数据一致性。其中保持数据库一致的原理即为当主数据库数据发生变化时,会将操作写入到主数据库日志中,而从数据库会不停的读取主数据库的日志保存到自己的日志系统中,然后进行执行,从而保持了主从数据库一致。 {8 Q- I' f; X
3.详解
: v) A, v0 p1 A+ Q5 n% R, _一、单一数据库的连接 在使用的时候,单一数据库的连接配置非常简单。我们只需要在配置文件中配置一下的信息即可。 - 'DB_TYPE' => 'mysql',
* t8 O, V8 x$ n9 G& K - 'DB_HOST' => '192.168.5.102',
* v3 M; j& M. X4 Y& z - 'DB_NAME' => 'databasename',
/ f" w' |3 h/ v3 C# f# z - 'DB_USER' => 'user',
- t1 @) R! ~) i. q' J - 'DB_PWD' => 'password', % v/ Q8 o" {3 G9 a- Q3 d
- 'DB_PORT' => '3306',
1 K" E/ r9 x2 s8 ?3 q$ {9 [ | - 'DB_PREFIX' => 'onmpw_',
复制代码设置完成以后就可以使用了。默认情况下就是单一的数据库连接。 二、分布式数据库的连接 单一数据库的连接很简单,我们着重分析一下分布式数据库的连接。 - 'DB_TYPE' => 'mysql', : y3 q; v/ k. b1 r: J3 G1 t
- 'DB_HOST' => '192.168.5.191,192.168.5.88,192.168.5.103', * u1 U3 `. d- E* S+ U Q
- 'DB_NAME' => 'test,test,test', * i9 C/ f# ~3 R7 z2 S- O% {) n
- 'DB_USER' => 'masteruser,slaveuser,slaveuser', + @. i' c; U7 M6 G5 p
- 'DB_PWD' => 'masterpass,slavepass,slavepass', ) F2 h+ ?0 x/ S7 C/ Y
- 'DB_PORT' => '3306',
) {& k5 ^7 H: {' e - 'DB_PREFIX' => '', 8 e" a" v) N1 i0 L
- 'DB_DEPLOY_TYPE' => 1, // 数据库部署方式:0 集中式(单一服务器),1 分布式(主从服务器)
* }. g: J* ?. O: Q5 |1 V1 ^ - 'DB_RW_SEPARATE' => true, // 数据库读写是否分离 主从式有效
0 S7 h4 h7 M% i4 }- z( @! j - 'DB_MASTER_NUM' => 1, // 读写分离后 主服务器数量 5 q. o4 Y! u5 ?, a; j# |
- 'DB_SLAVE_NO' => '', // 指定从服务器序号
复制代码按照以上配置就可以连接分布式数据库了。 下面我们看下面几个选项 ‘DB_HOST’ 分布式数据库,有几台服务器就要填写几个服务器地址,每个地址之间用逗号隔开。如果是主从式分布的话,前面的地址要是主数据库的地址。 对于下面的用户名和密码还有监听端口之类的,当然是有几个就写几个。如果各个数据库的用户名和密码都一样的话,可以只写一个。 对于这些选项的解析的代码如下 - $_config['username'] = explode(',',$this->config['username']); / ^% y/ r) o. l7 J; L! t2 p
- $_config['password'] = explode(',',$this->config['password']); $ C7 C, w+ S* G& }7 k
- $_config['hostname'] = explode(',',$this->config['hostname']); 3 y1 z$ G k" q- _$ N8 p
- $_config['hostport'] = explode(',',$this->config['hostport']); & j3 i6 I+ K: s# _8 h
- $_config['database'] = explode(',',$this->config['database']);
% l2 E; R+ G1 s8 e - $_config['dsn'] = explode(',',$this->config['dsn']); ! T( q& H4 Z: n% V, |
- $_config['charset'] = explode(',',$this->config['charset']);
复制代码 0 U: d7 H3 k3 K/ Q
‘DB_DEPLOY_TYPE’=>1 1 表示是分布式, 0 表示的是集中式(也就是单一服务器)。 该选项的实现是在类 Think\Db\Dirver中 - protected function initConnect($master=true) { / E; a3 _ M% R3 ?# O- Y4 _# e
- if(!empty($this->config['deploy'])) - b8 P) k( H+ z5 a$ ~$ Q
- // 采用分布式数据库
$ b4 E1 J& o* g1 |# w - $this->_linkID = $this->multiConnect($master);
5 k$ z7 G/ @' ~) U9 [( q; H - else
, K$ l: K, [6 y L. m W - // 默认单数据库
: }& t$ B/ h+ H; o+ q- j- _ - if ( !$this->_linkID ) $this->_linkID = $this->connect();
+ `0 g3 P' Z" f. D - }
复制代码
/ l \* G+ i# n2 R$this->config[‘deploy’]表示的就是’DB_DEPLOY_TYPE’这个配置选项,上面的配置在使用之前都已经经过解析了,配置项都在$this->config数组中。至于是如何解析配置文件的,这里我们不做介绍,感兴趣的可以参考Think\Db类。 $this->multiConnect()函数就是用来进行分布式连接的,如果’DB_DEPLOY_TYPE’选项设置为1,该函数就会执行。否则直接执行$this->connect()函数。 ‘DB_RW_SEPARATE’=>true true 表示读写分离;false表示读写不分离。 这里需要注意的是,读写分离是以主从式数据库系统为前提的。该选项设置为true的时候主数据库写,从数据库读。 - if($this->config['rw_separate']){
q& @4 a$ F* b% [2 U - // 主从式采用读写分离
, m' v% q- Q0 X) i, d. h* c - if($master)
: q! ]( \$ d! D9 m - // 主服务器写入
/ @( \; |2 k7 i( _3 I+ p - $r = $m;
! K1 n7 h$ f$ i5 u. W- A6 u - else{ : L x( P: ~ |: Q
- if(is_numeric($this->config['slave_no'])) {// 指定服务器读 8 E& d# B1 _- f2 A/ G0 E
- $r = $this->config['slave_no']; / S* t. E# B1 M \3 b# j, H
- }else{
! M6 O7 U C" L - // 读操作连接从服务器 7 y" l5 m$ y0 b
- $r = floor(mt_rand($this->config['master_num'],count($_config['hostname'])-1)); // 每次随机连接的数据库 8 J; o; E& m! N" s7 X3 [; w
- }
- z h* @/ T* J3 l) Y% B9 C9 R - }
, N- R+ y6 \* o - }else{
4 C3 g: A, F2 a: B - // 读写操作不区分服务器
1 v" _6 J6 e' H" m6 l% i% ?- C: I8 @ - $r = floor(mt_rand(0,count($_config['hostname'])-1)); // 每次随机连接的数据库 & X! @3 i7 a# X9 m. V! |
- }
复制代码
0 R( L& i: r, L# b$this->config[‘rw_separate’] 为true的时候采用读写分离,为false的时候读写不分离。读写分离为什么必须是主从式的呢?因为从服务器不能写只能读,如果向从服务器写入数据的话,数据是没法同步的。这样就会造成数据不一致的情况。所以说,如果我们的系统是主从式的话,我们必须采用读写分离。也就是说DB_RW_SEPARATE选项必须配置为true。 'DB_MASTER_NUM'=>1 该选项后面的数字表示读写分离后,主服务器的数量。因此该选项也是用于主从式数据库系统。 下面的代码是选择主服务器。 $m = floor(mt_rand(0,$this->config['master_num']-1)); 主从式数据库读取的时候选择从服务器读的核心代码 $r = floor(mt_rand($this->config['master_num'],count($_config['hostname'])-1)); // 每次随机连接的数据库 其中$this->config[‘master_num’]表示主服务器的数量。 'DB_SLAVE_NO'=> '' 指定从服务器的序号,用于读取数据。如果不设置,则根据主服务器的数量计算书从服务器的数量,然后从中随机选取一台进行读取。 if(is_numeric($this->config['slave_no'])) {// 指定服务器读! k' v6 E% o7 M7 Z8 C c" d' L
$r = $this->config['slave_no'];
9 B, F) u( P I2 o- o}else{, G! ]& u9 @ H3 l
// 读操作连接从服务器9 Q+ k! z: q% _+ c4 Y
$r = floor(mt_rand($this->config['master_num'],count($_config['hostname'])-1)); // 每次随机连接的数据库
" r! _1 P2 G. @! [, k} 以上是对每个选项的作用的实现代码进行了一个简单的说明。 下面我们来看其连接的部分 - if($m != $r ){
. c- R7 Z. k+ N4 o - $db_master = array( * O/ G. y4 n, I# K' _4 y# K2 z! B
- 'username' => isset($_config['username'][$m])?$_config['username'][$m]:$_config['username'][0], 0 c0 N+ s4 X: U
- 'password' => isset($_config['password'][$m])?$_config['password'][$m]:$_config['password'][0],
0 x* l; k0 f3 a: y7 \0 t& Z8 {. w7 R - 'hostname' => isset($_config['hostname'][$m])?$_config['hostname'][$m]:$_config['hostname'][0], 9 X, ^& _" q) p8 n2 V& N; n
- 'hostport' => isset($_config['hostport'][$m])?$_config['hostport'][$m]:$_config['hostport'][0],
& n0 j# i& F7 r( r2 H( F6 X" A - 'database' => isset($_config['database'][$m])?$_config['database'][$m]:$_config['database'][0], ! ^: I: o+ V6 g9 Q6 E5 t9 c# b; u+ k
- 'dsn' => isset($_config['dsn'][$m])?$_config['dsn'][$m]:$_config['dsn'][0], i- H- {, u5 J# b
- 'charset' => isset($_config['charset'][$m])?$_config['charset'][$m]:$_config['charset'][0],
2 w8 ?+ {. U D* ]: j6 z6 j - );
5 C( m2 G2 _) x0 y) M - }
4 O* _3 ^- g5 m$ K7 L) v2 H3 m - $db_config = array(
. m1 u' O' n. N9 ?# A: ~ - 'username' => isset($_config['username'][$r])?$_config['username'][$r]:$_config['username'][0],
+ W i* w& I# x7 T - 'password' => isset($_config['password'][$r])?$_config['password'][$r]:$_config['password'][0],
, L. p# Q/ j i0 [. S - 'hostname' => isset($_config['hostname'][$r])?$_config['hostname'][$r]:$_config['hostname'][0],
1 d3 R" D4 D3 H" F. }+ _1 d - 'hostport' => isset($_config['hostport'][$r])?$_config['hostport'][$r]:$_config['hostport'][0], 3 {$ H( k" ]& B3 ]) J& r
- 'database' => isset($_config['database'][$r])?$_config['database'][$r]:$_config['database'][0], # [: D( c' G. C: T
- 'dsn' => isset($_config['dsn'][$r])?$_config['dsn'][$r]:$_config['dsn'][0], y. o( t5 V1 M) u Z& h. \& X
- 'charset' => isset($_config['charset'][$r])?$_config['charset'][$r]:$_config['charset'][0], . T8 p; R5 g- Q* c v1 n# [2 n
- );
! o" J# _; t V5 p; l6 G {4 g - return $this->connect($db_config,$r,$r == $m ? false : $db_master);
复制代码
1 |! E, e d% C0 }看到这,我觉得大家应该对上面在介绍各个配置选项的代码的时候其中的$r和$m是什么作用了。 现在我们来看 $r == $m ? false : $db_master ,如果数据库读写不分离的情况下,读写是一台服务器的话 传给connect函数的值为false。或者是如果是主从分离的写的情况下传给connect的值也为false。通过上面代码我们看到,如果$r和$m不相等的情况下,会设置$db_master。其实也就是相当于一台备用的,如果选择的$r服务器出现故障不能连接,将会去连接$db_master。 connect()函数的第三个参数其实是表示当$db_config这台服务器连接故障时是否选择备用的连接。false表示不重连,其它值即表示重新连接。 其核心代码如下 - try{ 3 Q, h: [9 ~$ |7 s: M
- if(empty($config['dsn'])) {
% e6 h* k D) E* M% i# \ - $config['dsn'] = $this->parseDsn($config); ) S7 h6 V1 }7 ~/ D+ k# g
- }
! \2 E, T2 Z) {3 p - if(version_compare(PHP_VERSION,'5.3.6','<=')){
; m- E& K5 |+ |1 I: Q2 k; |4 Q+ C - // 禁用模拟预处理语句 8 x( q/ _% {, H
- $this->options[PDO::ATTR_EMULATE_PREPARES] = false;
f/ {& n2 f8 S$ a. j/ \ - } - w! g0 S7 L: z* k; t( M2 G
- $this->linkID[$linkNum] = new PDO( $config['dsn'], $config['username'], $config['password'],$this->options);
9 f6 z1 g0 F1 E6 I9 Z - }catch (\PDOException $e) {
5 }: X [; r4 P$ l2 c - if($autoConnection){ //$autoConnection不为false,而是默认的主服务器 $ |3 I6 @ ~5 j$ ^6 J, {1 U2 {6 _
- trace($e->getMessage(),'','ERR');
; X0 D4 E1 _: M - return $this->connect($autoConnection,$linkNum); //出现异常,使用递归函数重新连接
; O( ]+ M( \7 z - }elseif($config['debug']){ * O- V* F6 H8 V
- E($e->getMessage()); 0 [) h- p$ z* H0 a. H
- }
0 A6 E( D2 D# U# e - }
复制代码这种方式,对于主从式来说,$r和$m肯定不会相同。因此如果说在读取数据的时候,选择的那台从服务器出现故障的话,那主服务器即是备用的,最后会去主服务器读取。能保证数据读取的时效性。
( F( Z0 M& [* ^$ ^% d# s
% t H: M8 e9 c9 h+ t% }8 F9 {5 p3 x) Q
|