php+MySQL Proxy快速实现读写分离以及负载均衡,故障转移

阅读更多
MySQL PHP Lua SQL Server SQL

简单的说,MySQL Proxy就是一个连接池,负责将前台应用的连接请求转发给后台的数据库,并且通过使用lua脚本 ,可以实现复杂的连接控制和过滤,从而实现读写分离和负载平衡。对于应用来说,MySQL Proxy是完全透明的,应用则只需要连接到MySQL Proxy的监听端口即可。当然,这样proxy机器可能成为单点失效,但完全可以使用多个proxy机器做为冗余,在应用服务器的连接池配置中配置到多个proxy的连接参数即可。


典型配置案例:
1、最基础的应用,代理单个数据库服务器,这样就可以通过4040端口访问mysql数据库。
mysql-proxy –proxy-backend-addresses=192.168.18.110:3306
2、连接多个数据库服务器,假如A and B. 第一个客户端连接到 A,第二个连接到 B。
如果有一台停止服务时,代理会自动检测到,有新连接时会自动连接到一台正常的数据库。
mysql-proxy \
–proxy-backend-addresses=narcissus:3306 \
–proxy-backend-addresses=nostromo:3306
3、数据库读写分离,192.168.18.110负责写入,192.168.18.107负责读取数据,当然也可以再增加读取数据的服务器。
mysql-proxy \
–proxy-backend-addresses=192.168.18.110:3306 \
–proxy-read-only-backend-addresses=192.168.18.107:3306
这种方式常被理解为可以读写分离了,但是实际不是的。mysql-proxy不能区分哪些是发往从服务器的,还需要自己用脚本控制,见第四种方式。
4、 Lua 脚本能很好的控制连接和分布, 以及查询及返回的结果集.
使用Lua脚本时,必须使用 –proxy-lua-script 指定脚本的名称。
直到产生连接的时候才会读取脚本,也就是修改脚本后不用重新启动服务。
mysql-proxy –proxy-lua-script=rw-splitting.lua –proxy-backend-addresses=192.168.18.110:3306 –proxy-read-only-backend-addresses=192.168.18.107:3306
注意的问题:
1、proxy的读写分离机制是先把最初的几条查询发到master上建立连接,
当发送到master上的查询数超过连接池的最小值时开始把查询
2、LAST_INSERT_ID不能发送到主服务器上, 226 行修改为下面的就可以了
elseif not is_insert_id and token.token_name == “TK_FUNCTION” then
3、使用默认的rw-splitting.lua时,会提示找不到proxy-command,我把mysql-proxy的路径设置为系统路径,然后在 share目录下运行就一切Ok了,在运行中输入cmd,然后cd C:\tools\mysql-proxy\share。
4、字符乱码
通过proxy连上数据库之后,查到的字符串始终是乱码,即便手工执行了set names ‘utf8′也没有效果。
解决办法,mysql server必须设置
1.[mysqld]
2.skip-character-set-client-handshake
3. init-connect=’SET NAMES utf8′
4. default-character-set=utf8

Java代码 复制代码  收藏代码
  1. public function isReadOperation($sql) {   
  2.     return preg_match('/^\s*(SELECT|SHOW|DESC|PRAGMA)\s+/i',$sql);   
  3. }  
public function isReadOperation($sql) {
	return preg_match('/^\s*(SELECT|SHOW|DESC|PRAGMA)\s+/i',$sql);
}

php读写分离类

Php代码 复制代码  收藏代码
  1. /****************************************  
  2. *** mysql-rw-php version 0.1 @ 2009-4-16  
  3. *** code by hqlulu#gmail.com  
  4. *** http://www.aslibra.com  
  5. *** http://code.google.com/p/mysql-rw-php/  
  6. *** code modify from class_mysql.php (uchome)  
  7. ****************************************/  
  8.   
  9. class mysql_rw_php {   
  10.   
  11.     //查询个数   
  12.     var $querynum = 0;   
  13.     //当前操作的数据库连接   
  14.     var $link = null;   
  15.     //字符集   
  16.     var $charset;   
  17.     //当前数据库   
  18.     var $cur_db = '';   
  19.   
  20.     //是否存在有效的只读数据库连接   
  21.     var $ro_exist = false;   
  22.     //只读数据库连接   
  23.     var $link_ro = null;   
  24.     //读写数据库连接   
  25.     var $link_rw = null;   
  26.   
  27.     function mysql_rw_php(){   
  28.     }   
  29.   
  30.     function connect($dbhost$dbuser$dbpw$dbname = ''$pconnect = 0, $halt = TRUE) {   
  31.         if($pconnect) {   
  32.             if(!$this->link = @mysql_pconnect($dbhost$dbuser$dbpw)) {   
  33.                 $halt && $this->halt('Can not connect to MySQL server');   
  34.             }   
  35.         } else {   
  36.             if(!$this->link = @mysql_connect($dbhost$dbuser$dbpw)) {   
  37.                 $halt && $this->halt('Can not connect to MySQL server');   
  38.             }   
  39.         }   
  40.            
  41.         //只读连接失败   
  42.         if(!$this->link && !$haltreturn false;   
  43.            
  44.         //未初始化rw时,第一个连接作为rw   
  45.         if($this->link_rw == null)   
  46.             $this->link_rw = $this->link;   
  47.   
  48.         if($this->version() > '4.1') {   
  49.             if($this->charset) {   
  50.                 @mysql_query("SET character_set_connection=$this->charset, character_set_results=$this->charset, character_set_client=binary"$this->link);   
  51.             }   
  52.             if($this->version() > '5.0.1') {   
  53.                 @mysql_query("SET sql_mode=''"$this->link);   
  54.             }   
  55.         }   
  56.         if($dbname) {   
  57.             $this->select_db($dbname);   
  58.         }   
  59.     }   
  60.   
  61.     //连接一个只读的mysql数据库   
  62.     function connect_ro($dbhost$dbuser$dbpw$dbname = ''$pconnect = 0){   
  63.         if($this->link_rw == null)   
  64.             $this->link_rw = $this->link;   
  65.         $this->link = null;   
  66.         //不产生halt错误   
  67.         $this->connect($dbhost$dbuser$dbpw$dbname$pconnect, false);   
  68.         if($this->link){   
  69.             //连接成功   
  70.             //echo "link ro sussess!
    ";
      
  71.             $this->ro_exist = true;   
  72.             $this->link_ro = $this->link;   
  73.             if($this->cur_db){   
  74.                 //如果已经选择过数据库则需要操作一次   
  75.                 @mysql_select_db($this->cur_db, $this->link_ro);   
  76.             }   
  77.         }else{   
  78.             //连接失败   
  79.             //echo "link ro failed!
    ";
      
  80.             $this->link = &$this->link_rw;   
  81.         }   
  82.     }   
  83.   
  84.     //设置一系列只读数据库并且连接其中一个   
  85.     function set_ro_list($ro_list){   
  86.         if(is_array($ro_list)){   
  87.             //随机选择其中一个   
  88.             $link_ro = $ro_list[array_rand($ro_list)];   
  89.             $this->connect_ro($link_ro['dbhost'], $link_ro['dbuser'], $link_ro['dbpw']);   
  90.         }   
  91.     }   
  92.   
  93.     function select_db($dbname) {   
  94.         //同时操作两个数据库连接   
  95.         $this->cur_db = $dbname;   
  96.         if($this->ro_exist){   
  97.             @mysql_select_db($dbname$this->link_ro);   
  98.         }   
  99.         return @mysql_select_db($dbname$this->link_rw);   
  100.     }   
  101.   
  102.     function fetch_array($query$result_type = MYSQL_ASSOC) {   
  103.         return mysql_fetch_array($query$result_type);   
  104.     }   
  105.   
  106.     function fetch_one_array($sql$type = '') {   
  107.         $qr = $this->query($sql$type);   
  108.         return $this->fetch_array($qr);   
  109.     }   
  110.   
  111.     function query($sql$type = '') {   
  112.         $this->link = &$this->link_rw;   
  113.         //判断是否select语句   
  114.         if($this->ro_exist && preg_match ("/^(\s*)select/i"$sql)){   
  115.             $this->link = &$this->link_ro;   
  116.         }   
  117.         $func = $type == 'UNBUFFERED' && @function_exists('mysql_unbuffered_query') ?   
  118.             'mysql_unbuffered_query' : 'mysql_query';   
  119.         if(!($query = $func($sql$this->link)) && $type != 'SILENT') {   
  120.             $this->halt('MySQL Query Error'$sql);   
  121.         }   
  122.         $this->querynum++;   
  123.         return $query;   
  124.     }   
  125.   
  126.     function affected_rows() {   
  127.         return mysql_affected_rows($this->link);   
  128.     }   
  129.   
  130.     function error() {   
  131.         return (($this->link) ? mysql_error($this->link) : mysql_error());   
  132.     }   
  133.   
  134.     function errno() {   
  135.         return intval(($this->link) ? mysql_errno($this->link) : mysql_errno());   
  136.     }   
  137.   
  138.     function result($query$row) {   
  139.         $query = @mysql_result($query$row);   
  140.         return $query;   
  141.     }   
  142.   
  143.     function num_rows($query) {   
  144.         $query = mysql_num_rows($query);   
  145.         return $query;   
  146.     }   
  147.   
  148.     function num_fields($query) {   
  149.         return mysql_num_fields($query);   
  150.     }   
  151.   
  152.     function free_result($query) {   
  153.         return mysql_free_result($query);   
  154.     }   
  155.   
  156.     function insert_id() {   
  157.         return ($id = mysql_insert_id($this->link)) >= 0 ? $id : $this->result($this->query("SELECT last_insert_id()"), 0);   
  158.     }   
  159.   
  160.     function fetch_row($query) {   
  161.         $query = mysql_fetch_row($query);   
  162.         return $query;   
  163.     }   
  164.   
  165.     function fetch_fields($query) {   
  166.         return mysql_fetch_field($query);   
  167.     }   
  168.   
  169.     function version() {   
  170.         return mysql_get_server_info($this->link);   
  171.     }   
  172.   
  173.     function close() {   
  174.         return mysql_close($this->link);   
  175.     }   
  176.   
  177.     function halt($message = ''$sql = '') {   
  178.         $dberror = $this->error();   
  179.         $dberrno = $this->errno();   
  180.         echo ">   
  181.                 MySQL Error
      
  182.                 Message$message
      
  183.                 SQL$sql
      
  184.                 Error$dberror
      
  185.                 Errno.$dberrno
      
  186.                 
";   
  •         exit();   
  •     }   
  • }   
  •   
  • ?>  
  • link = @mysql_pconnect($dbhost, $dbuser, $dbpw)) {
    				$halt && $this->halt('Can not connect to MySQL server');
    			}
    		} else {
    			if(!$this->link = @mysql_connect($dbhost, $dbuser, $dbpw)) {
    				$halt && $this->halt('Can not connect to MySQL server');
    			}
    		}
    		
    		//只读连接失败
    		if(!$this->link && !$halt) return false;
    		
    		//未初始化rw时,第一个连接作为rw
    		if($this->link_rw == null)
    			$this->link_rw = $this->link;
    
    		if($this->version() > '4.1') {
    			if($this->charset) {
    				@mysql_query("SET character_set_connection=$this->charset, character_set_results=$this->charset, character_set_client=binary", $this->link);
    			}
    			if($this->version() > '5.0.1') {
    				@mysql_query("SET sql_mode=''", $this->link);
    			}
    		}
    		if($dbname) {
    			$this->select_db($dbname);
    		}
    	}
    
    	//连接一个只读的mysql数据库
    	function connect_ro($dbhost, $dbuser, $dbpw, $dbname = '', $pconnect = 0){
    		if($this->link_rw == null)
    			$this->link_rw = $this->link;
    		$this->link = null;
    		//不产生halt错误
    		$this->connect($dbhost, $dbuser, $dbpw, $dbname, $pconnect, false);
    		if($this->link){
    			//连接成功
    			//echo "link ro sussess!
    "; $this->ro_exist = true; $this->link_ro = $this->link; if($this->cur_db){ //如果已经选择过数据库则需要操作一次 @mysql_select_db($this->cur_db, $this->link_ro); } }else{ //连接失败 //echo "link ro failed!
    "; $this->link = &$this->link_rw; } } //设置一系列只读数据库并且连接其中一个 function set_ro_list($ro_list){ if(is_array($ro_list)){ //随机选择其中一个 $link_ro = $ro_list[array_rand($ro_list)]; $this->connect_ro($link_ro['dbhost'], $link_ro['dbuser'], $link_ro['dbpw']); } } function select_db($dbname) { //同时操作两个数据库连接 $this->cur_db = $dbname; if($this->ro_exist){ @mysql_select_db($dbname, $this->link_ro); } return @mysql_select_db($dbname, $this->link_rw); } function fetch_array($query, $result_type = MYSQL_ASSOC) { return mysql_fetch_array($query, $result_type); } function fetch_one_array($sql, $type = '') { $qr = $this->query($sql, $type); return $this->fetch_array($qr); } function query($sql, $type = '') { $this->link = &$this->link_rw; //判断是否select语句 if($this->ro_exist && preg_match ("/^(\s*)select/i", $sql)){ $this->link = &$this->link_ro; } $func = $type == 'UNBUFFERED' && @function_exists('mysql_unbuffered_query') ? 'mysql_unbuffered_query' : 'mysql_query'; if(!($query = $func($sql, $this->link)) && $type != 'SILENT') { $this->halt('MySQL Query Error', $sql); } $this->querynum++; return $query; } function affected_rows() { return mysql_affected_rows($this->link); } function error() { return (($this->link) ? mysql_error($this->link) : mysql_error()); } function errno() { return intval(($this->link) ? mysql_errno($this->link) : mysql_errno()); } function result($query, $row) { $query = @mysql_result($query, $row); return $query; } function num_rows($query) { $query = mysql_num_rows($query); return $query; } function num_fields($query) { return mysql_num_fields($query); } function free_result($query) { return mysql_free_result($query); } function insert_id() { return ($id = mysql_insert_id($this->link)) >= 0 ? $id : $this->result($this->query("SELECT last_insert_id()"), 0); } function fetch_row($query) { $query = mysql_fetch_row($query); return $query; } function fetch_fields($query) { return mysql_fetch_field($query); } function version() { return mysql_get_server_info($this->link); } function close() { return mysql_close($this->link); } function halt($message = '', $sql = '') { $dberror = $this->error(); $dberrno = $this->errno(); echo "
    MySQL Error
    Message: $message
    SQL: $sql
    Error: $dberror
    Errno.: $dberrno
    "; exit(); } } ?>

     调用方法

    Java代码 复制代码  收藏代码
    1. /****************************************  
    2. *** mysql-rw-php version 0.1 @ 2009-4-16  
    3. *** code by hqlulu#gmail.com  
    4. *** http://www.aslibra.com  
    5. *** http://code.google.com/p/mysql-rw-php/  
    6. *** code modify from class_mysql.php (uchome)  
    7. ****************************************/  
    8.   
    9. require_once('mysql_rw_php.class.php');   
    10.   
    11. //rw info   
    12. $db_rw = array(   
    13.     'dbhost'=>'www.aslibra.com',   
    14.     'dbuser'=>'aslibra',   
    15.     'dbpw'=>'www.aslibra.com',   
    16.     'dbname'=>'test'  
    17. );   
    18.   
    19. $db_ro = array(   
    20.     array(   
    21.         'dbhost'=>'www.aslibra.com:4306',   
    22.         'dbuser'=>'aslibra',   
    23.         'dbpw'=>'www.aslibra.com'  
    24.     )   
    25. );   
    26.   
    27. $DB = new mysql_rw_php;   
    28.   
    29. //connect Master   
    30. $DB->connect($db_rw[dbhost], $db_rw[dbuser], $db_rw[dbpw], $db_rw[dbname]);   
    31.   
    32. //Method 1: connect one server   
    33. $DB->connect_ro($db_ro[0][dbhost], $db_ro[0][dbuser], $db_ro[0][dbpw]);   
    34.   
    35. //Method 2: connect one server from a list by rand   
    36. $DB->set_ro_list($db_ro);   
    37.   
    38. //send to rw   
    39. $sql = "insert into a set a='test'";   
    40. $DB->query($sql);   
    41.   
    42. //send to ro   
    43. $sql = "select * from a";   
    44. $qr = $DB->query($sql);   
    45. while($row = $DB->fetch_array($qr)){   
    46.     echo $row[a];   
    47. }   
    48. ?>  
    'www.aslibra.com',
    	'dbuser'=>'aslibra',
    	'dbpw'=>'www.aslibra.com',
    	'dbname'=>'test'
    );
    
    $db_ro = array(
    	array(
    		'dbhost'=>'www.aslibra.com:4306',
    		'dbuser'=>'aslibra',
    		'dbpw'=>'www.aslibra.com'
    	)
    );
    
    $DB = new mysql_rw_php;
    
    //connect Master
    $DB->connect($db_rw[dbhost], $db_rw[dbuser], $db_rw[dbpw], $db_rw[dbname]);
    
    //Method 1: connect one server
    $DB->connect_ro($db_ro[0][dbhost], $db_ro[0][dbuser], $db_ro[0][dbpw]);
    
    //Method 2: connect one server from a list by rand
    $DB->set_ro_list($db_ro);
    
    //send to rw
    $sql = "insert into a set a='test'";
    $DB->query($sql);
    
    //send to ro
    $sql = "select * from a";
    $qr = $DB->query($sql);
    while($row = $DB->fetch_array($qr)){
    	echo $row[a];
    }
    ?>

    你可能感兴趣的:(lua,sql,MySQL,PHP,Lua,SQL,Server,SQL)