cuanzhutang8944
cuanzhutang8944

MySQL ONLINE DDL 和PT-ONLINE-SCHEMA-CHANGE对比

mysql5.6之前执行ddl语句会执行表锁，只允许查询不允许更新，执行ddl主要有两种方式copy方式和inplace方式，inplace方式又称为(fast index creation)，其中copy方式全称表锁，inplace方式只支持二级索引添加和删除。5.6之后可以利用Online DDL特性完成在线表结构调整，而pt-tools提供的pt-online-schema-change可以在几乎无表锁的情况下完成在线表结构调整，这里就针对mysql做下ddl的过程研究。
mysql原生的ddl方式实现形式有三种，分别是copy table、inplace、online ddl的方式，其中5.1-5.5版本实现是通过copy table的形式,5.6-5.7增加了inplace方式和Online ddl方式。
一、mysql 原生ddl实现方式
copy方式
　　(1).新建临时表
　　(2).锁原表，禁止DML，允许查询
　　(3).将原表数据拷贝到临时表(无排序，一行一行拷贝)
　　(4).删除原表，对临时表进行rename，升级字典锁，禁止读写
　　(5).完成DDL，释放锁
inplace方式
　　(1).新建索引的数据字典
　　(2).锁表，禁止DML，允许查询
　　(3).读取聚集索引，构造新的索引项，排序并插入新索引
　　(4).等待打开当前表的所有只读事务提交
　　(5).创建索引结束
online ddl实现
　　online方式实质也包含了copy和inplace方式，对于不支持online的ddl操作采用copy方式，比如修改列类型，删除主键等；对于inplace方式，mysql内部以“是否修改记录格式”为基准也分为两类，一类需要重建表(修改记录格式)，比如添加、删除列、修改列默认值等；另外一类是只需要修改表的元数据，比如添加、删除索引、修改列名等。Mysql将这两类方式分别称为rebuild方式和no-rebuild方式。online ddl主要包括3个阶段，prepare阶段，ddl执行阶段，commit阶段，rebuild方式比no-rebuild方式实质多了一个ddl执行阶段，prepare阶段和commit阶段类似。下面将主要介绍ddl执行过程中三个阶段的流程。
　　Prepare 阶段 ：
　　创建新的临时frm文件
　　持有EXCLUSIVE-MDL锁，禁止读写
　　根据alter类型，确定执行方式(copy,online-rebuild,online-norebuild)
　　更新数据字典的内存对象
　　分配row_log对象记录增量
　　生成新的临时ibd文件
　　ddl 执行 阶段 ：
　　降级EXCLUSIVE-MDL锁，允许读写
　　扫描old_table的聚集索引每一条记录rec
　　遍历新表的聚集索引和二级索引，逐一处理
　　根据rec构造对应的索引项
　　将构造索引项插入sort_buffer块
　　将sort_buffer块插入新的索引
　　处理ddl执行过程中产生的增量(仅rebuild类型需要)
　　commit 阶段
　　升级到EXCLUSIVE-MDL锁，禁止读写
　　重做最后row_log中最后一部分增量
　　更新innodb的数据字典表
　　提交事务(刷事务的redo日志)
　　修改统计信息
　　rename临时idb文件，frm文件
　　变更完成
Operation In-Place? Copies Table? Allows Concurrent DML? Allows Concurrent Query? Notes
添加索引 Yes* No* Yes Yes 对全文索引的一些限制
删除索引 Yes No Yes Yes 仅修改表的元数据
OPTIMIZE TABLE Yes Yes Yes Yes 从 5.6.17开始使用ALGORITHM=INPLACE，当然如果指定了old_alter_table=1或mysqld启动带--skip-new则将还是COPY模式。如果表上有全文索引只支持COPY
对一列设置默认值 Yes No Yes Yes 仅修改表的元数据
对一列修改auto-increment 的值 Yes No Yes Yes 仅修改表的元数据
添加 foreign key constraint Yes* No* Yes Yes 为了避免拷贝表，在约束创建时会禁用foreign_key_checks
删除 foreign key constraint Yes No Yes Yes foreign_key_checks 不影响
改变列名 Yes* No* Yes* Yes 为了允许DML并发, 如果保持相同数据类型，仅改变列名
添加列 Yes* Yes* Yes* Yes 尽管允许 ALGORITHM=INPLACE ，但数据大幅重组，所以它仍然是一项昂贵的操作。当添加列是auto-increment，不允许DML并发
删除列 Yes Yes* Yes Yes 尽管允许 ALGORITHM=INPLACE ，但数据大幅重组，所以它仍然是一项昂贵的操作
修改列数据类型 No Yes* No Yes 修改类型或添加长度，都会拷贝表，而且不允许更新操作
更改列顺序 Yes Yes Yes Yes 尽管允许 ALGORITHM=INPLACE ，但数据大幅重组，所以它仍然是一项昂贵的操作
修改ROW_FORMAT
和KEY_BLOCK_SIZE 		Yes Yes Yes Yes 尽管允许 ALGORITHM=INPLACE ，但数据大幅重组，所以它仍然是一项昂贵的操作
设置列属性NULL
或NOT NULL 		Yes Yes Yes Yes 尽管允许 ALGORITHM=INPLACE ，但数据大幅重组，所以它仍然是一项昂贵的操作
添加主键 Yes* Yes Yes Yes 尽管允许 ALGORITHM=INPLACE ，但数据大幅重组，所以它仍然是一项昂贵的操作。
如果列定义必须转化NOT NULL，则不允许INPLACE
删除并添加主键 Yes Yes Yes Yes 在同一个 ALTER TABLE 语句删除就主键、添加新主键时，才允许inplace；数据大幅重组,所以它仍然是一项昂贵的操作。
删除主键 No Yes No Yes 不允许并发DML，要拷贝表，而且如果没有在同一 ATLER TABLE 语句里同时添加主键则会收到限制
变更表字符集 No Yes No Yes 如果新的字符集编码不同，重建表

mysql 5.7在线修改表结构案例：
语法
alter table
| ALGORITHM [=] {DEFAULT|INPLACE|COPY}
  | ALTER [COLUMN] col_name {SET DEFAULT literal | DROP DEFAULT}
  | CHANGE [COLUMN] old_col_name new_col_name column_definition
        [FIRST|AFTER col_name]
  | LOCK [=] {DEFAULT|NONE|SHARED|EXCLUSIVE}
  | MODIFY [COLUMN] col_name column_definition
        [FIRST | AFTER col_name]
online ddl的原理是，mysql把在ddl时间内的所有的 插入，更新和删除操作记录到一个日志文件， 然后再把这些增量数据应用到相应的表上(等表上的事务完全释放后)，这个临时日志文件的上限值由innodb_online_alter_log_max_size指定,每次扩展innodb_sort_buffer_size的大小 该参数如果太小有可能导致DDL失败

二、pt-online-schema-change
注意事项：
    （1）表存在主键或唯一建
    （2）磁盘容量估计
    （3）原表不存在触发器
    （4）原表进行批量DML操作时，会有一定影响，需特别注意锁等待等参数设置
    （5）如果更新的表是被子表外键引用的父表，那么需要相应的更新子表的外键指向
1、online d dl 原理
（1）设置mysql会话参数
    SET SESSION innodb_lock_wait_timeout =1
    SET SESSION lock_wait_timeout =60
    SET SESSION wait_timeout =10000
    SET @@SQL_QUOTE_SHOW_CREATE = 1,@@SQL_MODE = 'NO_AUTO_VALUE_ON_ZERO,NO_ENGINE_SUBSTITUTION'  
（2）检查表结构，是否存在主键、其他外键参考、触发器
    SHOW TRIGGERS FROM `dbtest` LIKE 't1'
     SELECT table_schema , table_name FROM information_schema .key_column_usage WHERE referenced_table_schema = 'dbtest' AND referenced_table_name = 't1'
（3）创建新表
     Creating new table...
    CREATE TABLE `dbtest`.`_t1_new` (
      `id` int(11) NOT NULL AUTO_INCREMENT,
      `name` varchar(30) DEFAULT NULL,
      PRIMARY KEY (`id`)
    ) ENGINE=InnoDB AUTO_INCREMENT=1809061 DEFAULT CHARSET=utf8
    Created new table dbtest._t1_new OK.
（4）对新表进行DDL操作
    Altering new table...
    ALTER TABLE `dbtest`.`_t1_new` ADD COLUMN phone varchar(15)
    Altered `dbtest`.`_t1_new` OK.
（5）对旧表创建触发器（insert/update/delete）
    2017-11-19T18:05:26 Creating triggers...
    CREATE TRIGGER `pt_osc_dbtest_t1_del` AFTER DELETE ON `dbtest`.`t1` FOR EACH ROW DELETE IGNORE FROM `dbtest`.`_t1_new` WHERE `dbtest`.`_t1_new`.`id` <=> OLD.`id`
    CREATE TRIGGER `pt_osc_dbtest_t1_upd` AFTER UPDATE ON `dbtest`.`t1` FOR EACH ROW REPLACE INTO `dbtest`.`_t1_new` (`id`, `name`) VALUES (NEW.`id`, NEW.`name`)
    CREATE TRIGGER `pt_osc_dbtest_t1_ins` AFTER INSERT ON `dbtest`.`t1` FOR EACH ROW REPLACE INTO `dbtest`.`_t1_new` (`id`, `name`) VALUES (NEW.`id`, NEW.`name`)
    2017-11-19T18:05:26 Created triggers OK.
（6）copy数据
    copy数据一个chunk后会检查thread_running负载、warning、从库信息决定是否继续copy，默认--chunk-time=0.5,根据这个时间copy的记录动态调整chunk-size，在Copy相关的chunk时，会对原表相关记录加S锁。
    2017-11-19T18:05:26 Copying approximately 1593410 rows...
    INSERT LOW_PRIORITY IGNORE INTO `dbtest`.`_t1_new` (`id`, `name`) SELECT `id`, `name` FROM `dbtest`.`t1` FORCE INDEX(`PRIMARY`) WHERE ((`id` >= ?)) AND ((`id` <= ?)) LOCK IN SHARE MODE /*pt-online-schema-change 9157 copy nibble*/
    SELECT /*!40001 SQL_NO_CACHE */ `id` FROM `dbtest`.`t1` FORCE INDEX(`PRIMARY`) WHERE ((`id` >= ?)) ORDER BY `id` LIMIT ?, 2 /*next chunk boundary*/
    2017-11-19T18:05:45 Copied rows OK.
（7）分析新表、统计信息
    2017-11-19T18:05:45 Analyzing new table..
（8）新、旧表交换，将旧表t1重命名为_t1_old，将新表_t1_new重命名为t1，并删除旧表_t1_old
    2017-11-19T18:05:45 Swapping tables...
    RENAME TABLE `dbtest`.`t1` TO `dbtest`.`_t1_old`, `dbtest`.`_t1_new` TO `dbtest`.`t1`
    2017-11-19T18:05:45 Swapped original and new tables OK.
    2017-11-19T18:05:45 Dropping old table...
    DROP TABLE IF EXISTS `dbtest`.`_t1_old`
    2017-11-19T18:05:45 Dropped old table `dbtest`.`_t1_old` OK.
（9）删除触发器
    2017-11-19T18:05:45 Dropping triggers...
    DROP TRIGGER IF EXISTS `dbtest`.`pt_osc_dbtest_t1_del`;
    DROP TRIGGER IF EXISTS `dbtest`.`pt_osc_dbtest_t1_upd`;
    DROP TRIGGER IF EXISTS `dbtest`.`pt_osc_dbtest_t1_ins`;
    2017-11-19T18:05:45 Dropped triggers OK.
（10）完成表结构在线修改
Successfully altered `dbtest`.`t1`.

点击(此处)折叠或打开

  1. 171119 17:53:00 66 Connect dbuser@BX-128-28 on dbtest
  2.                    66 Query SHOW VARIABLES LIKE 'innodb\_lock_wait_timeout'
  3.                    66 Query SET SESSION innodb_lock_wait_timeout=1
  4.                    66 Query SHOW VARIABLES LIKE 'lock\_wait_timeout'
  5.                    66 Query SET SESSION lock_wait_timeout=60
  6.                    66 Query SHOW VARIABLES LIKE 'wait\_timeout'
  7.                    66 Query SET SESSION wait_timeout=10000
  8.                    66 Query SELECT @@SQL_MODE
  9.                    66 Query SET @@SQL_QUOTE_SHOW_CREATE = 1/*!40101, @@SQL_MODE='NO_AUTO_VALUE_ON_ZERO,NO_ENGINE_SUBSTITUTION'*/
  10.                    66 Query SELECT @@server_id /*!50038 , @@hostname*/
  11.                    67 Connect dbuser@BX-128-28 on dbtest
  12.                    67 Query SHOW VARIABLES LIKE 'innodb\_lock_wait_timeout'
  13.                    67 Query SET SESSION innodb_lock_wait_timeout=1
  14.                    67 Query SHOW VARIABLES LIKE 'lock\_wait_timeout'
  15.                    67 Query SET SESSION lock_wait_timeout=60
  16.                    67 Query SHOW VARIABLES LIKE 'wait\_timeout'
  17.                    67 Query SET SESSION wait_timeout=10000
  18.                    67 Query SELECT @@SQL_MODE
  19.                    67 Query SET @@SQL_QUOTE_SHOW_CREATE = 1/*!40101, @@SQL_MODE='NO_AUTO_VALUE_ON_ZERO,NO_ENGINE_SUBSTITUTION'*/
  20.                    67 Query SELECT @@server_id /*!50038 , @@hostname*/
  21.                    66 Query SHOW VARIABLES LIKE 'wsrep_on'
  22.                    66 Query SHOW VARIABLES LIKE 'version%'
  23.                    66 Query SHOW ENGINES
  24.                    66 Query SHOW VARIABLES LIKE 'innodb_version'
  25.                    66 Query SHOW VARIABLES LIKE 'innodb_stats_persistent'
  26.                    66 Query SELECT CONCAT(@@hostname, @@port)
  27.                    66 Query SHOW TABLES FROM `dbtest` LIKE 't1'
  28.                    66 Query SHOW TRIGGERS FROM `dbtest` LIKE 't1'
  29.                    66 Query /*!40101 SET @OLD_SQL_MODE := @@SQL_MODE, @@SQL_MODE := '', @OLD_QUOTE := @@SQL_QUOTE_SHOW_CREATE, @@SQL_QUOTE_SHOW_CREATE := 1 */
  30.                    66 Query USE `dbtest`
  31.                    66 Query SHOW CREATE TABLE `dbtest`.`t1`
  32.                    66 Query /*!40101 SET @@SQL_MODE := @OLD_SQL_MODE, @@SQL_QUOTE_SHOW_CREATE := @OLD_QUOTE */
  33.                    66 Query EXPLAIN SELECT * FROM `dbtest`.`t1` WHERE 1=1
  34.                    66 Query SELECT table_schema, table_name FROM information_schema.key_column_usage WHERE referenced_table_schema='dbtest' AND referenced_table_name='t1'
  35.                    66 Query SHOW VARIABLES LIKE 'wsrep_on'
  36.                    66 Query /*!40101 SET @OLD_SQL_MODE := @@SQL_MODE, @@SQL_MODE := '', @OLD_QUOTE := @@SQL_QUOTE_SHOW_CREATE, @@SQL_QUOTE_SHOW_CREATE := 1 */
  37.                    66 Query USE `dbtest`
  38.                    66 Query SHOW CREATE TABLE `dbtest`.`t1`
  39.                    66 Query /*!40101 SET @@SQL_MODE := @OLD_SQL_MODE, @@SQL_QUOTE_SHOW_CREATE := @OLD_QUOTE */
  40.                    66 Query CREATE TABLE `dbtest`.`_t1_new` (
  41.   `id` int(11) NOT NULL AUTO_INCREMENT,
  42.   `name` varchar(30) DEFAULT NULL,
  43.   PRIMARY KEY (`id`)
  44. ) ENGINE=InnoDB AUTO_INCREMENT=1809061 DEFAULT CHARSET=utf8
  45.                    66 Query ALTER TABLE `dbtest`.`_t1_new` ADD COLUMN phone varchar(15)
  46.                    66 Query /*!40101 SET @OLD_SQL_MODE := @@SQL_MODE, @@SQL_MODE := '', @OLD_QUOTE := @@SQL_QUOTE_SHOW_CREATE, @@SQL_QUOTE_SHOW_CREATE := 1 */
  47.                    66 Query USE `dbtest`
  48.                    66 Query SHOW CREATE TABLE `dbtest`.`_t1_new`
  49.                    66 Query /*!40101 SET @@SQL_MODE := @OLD_SQL_MODE, @@SQL_QUOTE_SHOW_CREATE := @OLD_QUOTE */
  50.                    66 Query EXPLAIN SELECT * FROM `dbtest`.`t1` WHERE 1=1
  51.                    66 Query SELECT /*!40001 SQL_NO_CACHE */ `id` FROM `dbtest`.`t1` FORCE INDEX(`PRIMARY`) ORDER BY `id` LIMIT 1 /*first lower boundary*/
  52.                    66 Query SHOW TABLES FROM `dbtest` LIKE '\_t1\_new'
  53.                    66 Query DROP TABLE IF EXISTS `dbtest`.`_t1_new`
  54.                    67 Quit
  55.                    66 Quit
2、 增加字 段
预执行：pt-online-schema-change --user=dbuser --password=123456 --host=10.xx  --alter "ADD COLUMN phone varchar(15)" D=dbtest,t=t1 --print --dry-run

点击(此处)折叠或打开

  1. Operation, tries, wait:
  2.   analyze_table, 10, 1
  3.   copy_rows, 10, 0.25
  4.   create_triggers, 10, 1
  5.   drop_triggers, 10, 1
  6.   swap_tables, 10, 1
  7.   update_foreign_keys, 10, 1
  8. Starting a dry run. `dbtest`.`t1` will not be altered. Specify --execute instead of --dry-run to alter the table.
  9. Creating new table...
  10. CREATE TABLE `dbtest`.`_t1_new` (
  11.   `id` int(11) NOT NULL AUTO_INCREMENT,
  12.   `name` varchar(30) DEFAULT NULL,
  13.   PRIMARY KEY (`id`)
  14. ) ENGINE=InnoDB AUTO_INCREMENT=1809061 DEFAULT CHARSET=utf8
  15. Created new table dbtest._t1_new OK.
  16. Altering new table...
  17. ALTER TABLE `dbtest`.`_t1_new` ADD COLUMN phone varchar(15)
  18. Altered `dbtest`.`_t1_new` OK.
  19. Not creating triggers because this is a dry run.
  20. CREATE TRIGGER `pt_osc_dbtest_t1_del` AFTER DELETE ON `dbtest`.`t1` FOR EACH ROW DELETE IGNORE FROM `dbtest`.`_t1_new` WHERE `dbtest`.`_t1_new`.`id` <=> OLD.`id`
  21. CREATE TRIGGER `pt_osc_dbtest_t1_upd` AFTER UPDATE ON `dbtest`.`t1` FOR EACH ROW REPLACE INTO `dbtest`.`_t1_new` (`id`, `name`) VALUES (NEW.`id`, NEW.`name`)
  22. CREATE TRIGGER `pt_osc_dbtest_t1_ins` AFTER INSERT ON `dbtest`.`t1` FOR EACH ROW REPLACE INTO `dbtest`.`_t1_new` (`id`, `name`) VALUES (NEW.`id`, NEW.`name`)
  23. Not copying rows because this is a dry run.
  24. INSERT LOW_PRIORITY IGNORE INTO `dbtest`.`_t1_new` (`id`, `name`) SELECT `id`, `name` FROM `dbtest`.`t1` FORCE INDEX(`PRIMARY`) WHERE ((`id` >= ?)) AND ((`id` <= ?)) LOCK IN SHARE MODE /*pt-online-schema-change 9137 copy nibble*/
  25. SELECT /*!40001 SQL_NO_CACHE */ `id` FROM `dbtest`.`t1` FORCE INDEX(`PRIMARY`) WHERE ((`id` >= ?)) ORDER BY `id` LIMIT ?, 2 /*next chunk boundary*/
  26. Not swapping tables because this is a dry run.
  27. Not dropping old table because this is a dry run.
  28. Not dropping triggers because this is a dry run.
  29. DROP TRIGGER IF EXISTS `dbtest`.`pt_osc_dbtest_t1_del`;
  30. DROP TRIGGER IF EXISTS `dbtest`.`pt_osc_dbtest_t1_upd`;
  31. DROP TRIGGER IF EXISTS `dbtest`.`pt_osc_dbtest_t1_ins`;
  32. 2017-11-19T17:53:00 Dropping new table...
  33. DROP TABLE IF EXISTS `dbtest`.`_t1_new`;
  34. 2017-11-19T17:53:00 Dropped new table OK.
  35. Dry run complete. `dbtest`.`t1` was not altered.
正式 执 行 ： pt-online-schema-change --user=dbuser --password=123456 --host=10.xx  --alter "ADD COLUMN phone varchar(15)" D=dbtest,t=t1 --print --execute

点击(此处)折叠或打开

  1. No slaves found. See --recursion-method if host BX-128-28 has slaves.
  2. Not checking slave lag because no slaves were found and --check-slave-lag was not specified.
  3. Operation, tries, wait:
  4.   analyze_table, 10, 1
  5.   copy_rows, 10, 0.25
  6.   create_triggers, 10, 1
  7.   drop_triggers, 10, 1
  8.   swap_tables, 10, 1
  9.   update_foreign_keys, 10, 1
  10. Altering `dbtest`.`t1`...
  11. Creating new table...
  12. CREATE TABLE `dbtest`.`_t1_new` (
  13.   `id` int(11) NOT NULL AUTO_INCREMENT,
  14.   `name` varchar(30) DEFAULT NULL,
  15.   PRIMARY KEY (`id`)
  16. ) ENGINE=InnoDB AUTO_INCREMENT=1809061 DEFAULT CHARSET=utf8
  17. Created new table dbtest._t1_new OK.
  18. Altering new table...
  19. ALTER TABLE `dbtest`.`_t1_new` ADD COLUMN phone varchar(15)
  20. Altered `dbtest`.`_t1_new` OK.
  21. 2017-11-19T18:05:26 Creating triggers...
  22. CREATE TRIGGER `pt_osc_dbtest_t1_del` AFTER DELETE ON `dbtest`.`t1` FOR EACH ROW DELETE IGNORE FROM `dbtest`.`_t1_new` WHERE `dbtest`.`_t1_new`.`id` <=> OLD.`id`
  23. CREATE TRIGGER `pt_osc_dbtest_t1_upd` AFTER UPDATE ON `dbtest`.`t1` FOR EACH ROW REPLACE INTO `dbtest`.`_t1_new` (`id`, `name`) VALUES (NEW.`id`, NEW.`name`)
  24. CREATE TRIGGER `pt_osc_dbtest_t1_ins` AFTER INSERT ON `dbtest`.`t1` FOR EACH ROW REPLACE INTO `dbtest`.`_t1_new` (`id`, `name`) VALUES (NEW.`id`, NEW.`name`)
  25. 2017-11-19T18:05:26 Created triggers OK.
  26. 2017-11-19T18:05:26 Copying approximately 1593410 rows...
  27. INSERT LOW_PRIORITY IGNORE INTO `dbtest`.`_t1_new` (`id`, `name`) SELECT `id`, `name` FROM `dbtest`.`t1` FORCE INDEX(`PRIMARY`) WHERE ((`id` >= ?)) AND ((`id` <= ?)) LOCK IN SHARE MODE /*pt-online-schema-change 9157 copy nibble*/
  28. SELECT /*!40001 SQL_NO_CACHE */ `id` FROM `dbtest`.`t1` FORCE INDEX(`PRIMARY`) WHERE ((`id` >= ?)) ORDER BY `id` LIMIT ?, 2 /*next chunk boundary*/
  29. 2017-11-19T18:05:45 Copied rows OK.
  30. 2017-11-19T18:05:45 Analyzing new table...
  31. 2017-11-19T18:05:45 Swapping tables...
  32. RENAME TABLE `dbtest`.`t1` TO `dbtest`.`_t1_old`, `dbtest`.`_t1_new` TO `dbtest`.`t1`
  33. 2017-11-19T18:05:45 Swapped original and new tables OK.
  34. 2017-11-19T18:05:45 Dropping old table...
  35. DROP TABLE IF EXISTS `dbtest`.`_t1_old`
  36. 2017-11-19T18:05:45 Dropped old table `dbtest`.`_t1_old` OK.
  37. 2017-11-19T18:05:45 Dropping triggers...
  38. DROP TRIGGER IF EXISTS `dbtest`.`pt_osc_dbtest_t1_del`;
  39. DROP TRIGGER IF EXISTS `dbtest`.`pt_osc_dbtest_t1_upd`;
  40. DROP TRIGGER IF EXISTS `dbtest`.`pt_osc_dbtest_t1_ins`;
  41. 2017-11-19T18:05:45 Dropped triggers OK.
  42. Successfully altered `dbtest`.`t1`.
3、 删 除字段
pt-online-schema-change --user=dbuser --password=123456 --host=10.xx  --no-check-replication-filters  --recursion-method=none  --alter "DROP COLUMN phone " D=dbtest,t=t1 --print --execute

点击(此处)折叠或打开

  1. No slaves found. See --recursion-method if host BX-128-28 has slaves.
  2. Not checking slave lag because no slaves were found and --check-slave-lag was not specified.
  3. Operation, tries, wait:
  4.   analyze_table, 10, 1
  5.   copy_rows, 10, 0.25
  6.   create_triggers, 10, 1
  7.   drop_triggers, 10, 1
  8.   swap_tables, 10, 1
  9.   update_foreign_keys, 10, 1
  10. Altering `dbtest`.`t1`...
  11. Creating new table...
  12. CREATE TABLE `dbtest`.`_t1_new` (
  13.   `id` int(11) NOT NULL AUTO_INCREMENT,
  14.   `name` varchar(30) DEFAULT NULL,
  15.   `phone` varchar(15) DEFAULT NULL,
  16.   PRIMARY KEY (`id`)
  17. ) ENGINE=InnoDB AUTO_INCREMENT=1809061 DEFAULT CHARSET=utf8
  18. Created new table dbtest._t1_new OK.
  19. Altering new table...
  20. ALTER TABLE `dbtest`.`_t1_new` DROP COLUMN phone
  21. Altered `dbtest`.`_t1_new` OK.
  22. 2017-11-19T22:56:33 Creating triggers...
  23. CREATE TRIGGER `pt_osc_dbtest_t1_del` AFTER DELETE ON `dbtest`.`t1` FOR EACH ROW DELETE IGNORE FROM `dbtest`.`_t1_new` WHERE `dbtest`.`_t1_new`.`id` <=> OLD.`id`
  24. CREATE TRIGGER `pt_osc_dbtest_t1_upd` AFTER UPDATE ON `dbtest`.`t1` FOR EACH ROW REPLACE INTO `dbtest`.`_t1_new` (`id`, `name`) VALUES (NEW.`id`, NEW.`name`)
  25. CREATE TRIGGER `pt_osc_dbtest_t1_ins` AFTER INSERT ON `dbtest`.`t1` FOR EACH ROW REPLACE INTO `dbtest`.`_t1_new` (`id`, `name`) VALUES (NEW.`id`, NEW.`name`)
  26. 2017-11-19T22:56:33 Created triggers OK.
  27. 2017-11-19T22:56:33 Copying approximately 1597892 rows...
  28. INSERT LOW_PRIORITY IGNORE INTO `dbtest`.`_t1_new` (`id`, `name`) SELECT `id`, `name` FROM `dbtest`.`t1` FORCE INDEX(`PRIMARY`) WHERE ((`id` >= ?)) AND ((`id` <= ?)) LOCK IN SHARE MODE /*pt-online-schema-change 9444 copy nibble*/
  29. SELECT /*!40001 SQL_NO_CACHE */ `id` FROM `dbtest`.`t1` FORCE INDEX(`PRIMARY`) WHERE ((`id` >= ?)) ORDER BY `id` LIMIT ?, 2 /*next chunk boundary*/
  30. 2017-11-19T22:56:52 Copied rows OK.
  31. 2017-11-19T22:56:52 Analyzing new table...
  32. 2017-11-19T22:56:52 Swapping tables...
  33. RENAME TABLE `dbtest`.`t1` TO `dbtest`.`_t1_old`, `dbtest`.`_t1_new` TO `dbtest`.`t1`
  34. 2017-11-19T22:56:52 Swapped original and new tables OK.
  35. 2017-11-19T22:56:52 Dropping old table...
  36. DROP TABLE IF EXISTS `dbtest`.`_t1_old`
  37. 2017-11-19T22:56:52 Dropped old table `dbtest`.`_t1_old` OK.
  38. 2017-11-19T22:56:52 Dropping triggers...
  39. DROP TRIGGER IF EXISTS `dbtest`.`pt_osc_dbtest_t1_del`;
  40. DROP TRIGGER IF EXISTS `dbtest`.`pt_osc_dbtest_t1_upd`;
  41. DROP TRIGGER IF EXISTS `dbtest`.`pt_osc_dbtest_t1_ins`;
  42. 2017-11-19T22:56:52 Dropped triggers OK.
  43. Successfully altered `dbtest`.`t1`.
4、添 加索引
pt-online-schema-change --user=dbuser --password=123456 --host=10.xx  --no-check-replication-filters  --recursion-method=none  --alter "add   key idx_name(name)" D=dbtest,t=t1 --print --execute

点击(此处)折叠或打开

  1. No slaves found. See --recursion-method if host BX-128-28 has slaves.
  2. Not checking slave lag because no slaves were found and --check-slave-lag was not specified.
  3. Operation, tries, wait:
  4.   analyze_table, 10, 1
  5.   copy_rows, 10, 0.25
  6.   create_triggers, 10, 1
  7.   drop_triggers, 10, 1
  8.   swap_tables, 10, 1
  9.   update_foreign_keys, 10, 1
  10. Altering `dbtest`.`t1`...
  11. Creating new table...
  12. CREATE TABLE `dbtest`.`_t1_new` (
  13.   `id` int(11) NOT NULL AUTO_INCREMENT,
  14.   `name` varchar(30) DEFAULT NULL,
  15.   PRIMARY KEY (`id`)
  16. ) ENGINE=InnoDB AUTO_INCREMENT=1809061 DEFAULT CHARSET=utf8
  17. Created new table dbtest._t1_new OK.
  18. Altering new table...
  19. ALTER TABLE `dbtest`.`_t1_new` add key(name)
  20. Altered `dbtest`.`_t1_new` OK.
  21. 2017-11-19T23:00:40 Creating triggers...
  22. CREATE TRIGGER `pt_osc_dbtest_t1_del` AFTER DELETE ON `dbtest`.`t1` FOR EACH ROW DELETE IGNORE FROM `dbtest`.`_t1_new` WHERE `dbtest`.`_t1_new`.`id` <=> OLD.`id`
  23. CREATE TRIGGER `pt_osc_dbtest_t1_upd` AFTER UPDATE ON `dbtest`.`t1` FOR EACH ROW REPLACE INTO `dbtest`.`_t1_new` (`id`, `name`) VALUES (NEW.`id`, NEW.`name`)
  24. CREATE TRIGGER `pt_osc_dbtest_t1_ins` AFTER INSERT ON `dbtest`.`t1` FOR EACH ROW REPLACE INTO `dbtest`.`_t1_new` (`id`, `name`) VALUES (NEW.`id`, NEW.`name`)
  25. 2017-11-19T23:00:40 Created triggers OK.
  26. 2017-11-19T23:00:40 Copying approximately 1559718 rows...
  27. INSERT LOW_PRIORITY IGNORE INTO `dbtest`.`_t1_new` (`id`, `name`) SELECT `id`, `name` FROM `dbtest`.`t1` FORCE INDEX(`PRIMARY`) WHERE ((`id` >= ?)) AND ((`id` <= ?)) LOCK IN SHARE MODE /*pt-online-schema-change 9453 copy nibble*/
  28. SELECT /*!40001 SQL_NO_CACHE */ `id` FROM `dbtest`.`t1` FORCE INDEX(`PRIMARY`) WHERE ((`id` >= ?)) ORDER BY `id` LIMIT ?, 2 /*next chunk boundary*/
  29. 2017-11-19T23:01:09 Copied rows OK.
  30. 2017-11-19T23:01:09 Analyzing new table...
  31. 2017-11-19T23:01:09 Swapping tables...
  32. RENAME TABLE `dbtest`.`t1` TO `dbtest`.`_t1_old`, `dbtest`.`_t1_new` TO `dbtest`.`t1`
  33. 2017-11-19T23:01:09 Swapped original and new tables OK.
  34. 2017-11-19T23:01:09 Dropping old table...
  35. DROP TABLE IF EXISTS `dbtest`.`_t1_old`
  36. 2017-11-19T23:01:09 Dropped old table `dbtest`.`_t1_old` OK.
  37. 2017-11-19T23:01:09 Dropping triggers...
  38. DROP TRIGGER IF EXISTS `dbtest`.`pt_osc_dbtest_t1_del`;
  39. DROP TRIGGER IF EXISTS `dbtest`.`pt_osc_dbtest_t1_upd`;
  40. DROP TRIGGER IF EXISTS `dbtest`.`pt_osc_dbtest_t1_ins`;
  41. 2017-11-19T23:01:09 Dropped triggers OK.
  42. Successfully altered `dbtest`.`t1`.
5、 删除索 引
pt-online-schema-change --user=dbuser --password=123456 --host=10.xx  --no-check-replication-filters  --recursion-method=none  --alter "DROP   key idx_name" D=dbtest,t=t1 --print --execute
6、 改变字段类型、长度
pt-online-schema-change --user=dbuser --password=123456 --host=10.xx  --no-check-replication-filters  --recursion-method=none  --alter "modify name varchar(10)" D=dbtest,t=t1 --print --execute

来自 “ ITPUB博客 ” ，链接：http://blog.itpub.net/27067062/viewspace-2147452/，如需转载，请注明出处，否则将追究法律责任。

转载于:http://blog.itpub.net/27067062/viewspace-2147452/

你可能感兴趣的:(MySQL ONLINE DDL 和PT-ONLINE-SCHEMA-CHANGE对比)

  • 链表相交问题（双指针法）（java和c语言） 野犬寒鸦 链表c语言算法java
    问题描述给你两个单链表的头节点headA和headB，请你找出并返回两个单链表相交的起始节点。如果两个链表没有交点，返回null。方法：双指针一种高效的方法是使用两个指针，分别从两个链表的头部开始遍历。当一个指针到达链表末尾时，它切换到另一个链表的头部继续遍历。如果两个链表相交，那么这两个指针一定会在某一点相遇，这个相遇点就是相交的起始节点。实现思路初始化两个指针：分别指向链表A和链表B的头节点。
  • AI学习指南Ollama篇-Ollama简介 俞兆鹏 AI学习指南人工智能ollama
    一、定义大语言模型（LLM）是一种基于深度学习的自然语言处理模型，能够生成文本、回答问题、翻译语言、撰写代码等。这些模型通过海量的文本数据进行训练，学习语言的模式和结构，从而能够生成自然流畅的文本内容。随着技术的不断进步，大语言模型在各个领域都展现出了巨大的潜力。二、应用场景大语言模型的应用场景非常广泛，以下是一些常见的例子：聊天机器人：通过自然语言理解与生成，为用户提供智能对话服务。内容创作：帮
  • java基础加强四（反射，代理模式，自定义注解） 咸鱼太咸 从新开始java反射
    一、反射反射机制是java中一个很强大的功能，可以跳过jvm实例化对象的过程，直接实例化类的class对象，然后直接操作class对象，再运行过程中，几乎可以得到任何一个类的属性和方法，能够调用任何一个对象的方法和属性。Class对象：一个类的描述，存储了类的信息。看一下api：比如一个类叫Demo，在jvm加载的时候就会创建一个class对象，里边存储了Demo类的信息，有什么属性，方法，构造器
  • 个人KPI与GTD之间为什么怎么像 小Mie不吃饭 KPI指标GTDgtdkpi
    目录KPI的定义GTD的定义KPI与GTD的关系目标一致性相互补充应用场景实际应用示例KPI（关键绩效指标）和GTD（GettingThingsDone，完成每一件事）是两种不同的管理工具，它们在个人和组织管理中有着各自的作用和应用场景，但也存在一定的联系。KPI的定义KPI是关键绩效指标，通过对组织内部流程的关键参数进行设置、取样、计算、分析，衡量流程绩效的一种目标式量化管理指标。KPI的主要作
  • 【Python】2.1字面量 我是初九 人生苦短我爱Pythonpython字符串
    字面量(literal)在计算机科学中，字面量（literal）是用于表达源代码中一个固定值的表示法（notation）。几乎所有计算机编程语言都具有对基本值的字面量表示，诸如：整数、浮点数以及字符串；而有很多也对布尔类型和字符类型的值也支持字面量表示；还有一些甚至对枚举类型的元素以及像数组、记录和对象等复合类型的值也支持字面量表示法。简单地说，字面量是用于表示固定值的符号(token)字面量是某
  • 设计模式--策略模式 shenzy呀 设计模式策略模式设计模式
    文章目录策略（Strategy）模式策略模式的收银软件策略模式的特点使用场景优缺点策略模式和工厂模式的结合策略（Strategy）模式本质：分离算法，选择实现。策略模式：针对一组算法，将每一个算法封装到具有共同接口的独立的类中，使得它们可以互换。使用策略模式可以把行为和环境分割开来。环境类Context负责查询要做什么，各种算法则在具体策略类（ConcreteStrategy）中提供。当出现新的促
  • linux下使用vscode和cmake高效管理c++项目简明教程 zeeq_ UbuntuC++vscodevscodelinuxc++
      安装vscode及c++环境配置可以参见：https://blog.csdn.net/fangshuo_light/article/details/123635576  首先，创建工程目录，并在vscode中打开该文件夹，在里面创建如下文件夹：include：用于存放.h文件src：用于存放.cpp文件build：cmake生成文件的存放路径CMakeLists.txt：cmake配置文件  
  • typing库 离开那天 windows
    typing库是Python标准库的一部分，用于支持静态类型检查。通过使用typing库，你可以为函数、变量和类添加类型注解，从而提高代码的可读性和可维护性，并帮助工具如IDE和类型检查器（例如mypy）进行静态类型检查。以下是typing库的一些常见用法和示例：1.基本类型注解你可以为函数参数和返回值添加类型注解：defgreet(name:str)->str:returnf"Hello,{na
  • java线程间如何通信 一只爪子 javajvm开发语言
    Java线程之间可以通过以下方式进行通信：使用wait()和notify()方法，这需要使用同步代码块或同步方法。在同步代码块或同步方法中，线程可以调用wait()方法阻塞，并在其他线程调用notify()方法后恢复执行。使用CountDownLatch，它是一个同步辅助类，可以让一个线程等待其他线程的完成。使用CyclicBarrier，它也是一个同步辅助类，可以让多个线程在某个点上等待，直到所
  • python 类型标注-typing --- 类型标注支持 — Python 3.7.9 文档 weixin_39892481
    类,函数和修饰器.¶这个模块定义了如下的类,模块和修饰器.classtyping.TypeVar¶类型变量用法:T=TypeVar("T")#CanbeanythingA=TypeVar("A",str,bytes)#MustbestrorbytesTypevariablesexistprimarilyforthebenefitofstatictypecheckers.Theyserveasthe
  • 《Effective Java》学习笔记--第3部分 方法设计和实现最佳实践 Suwg209 EffectiveJava最佳实践笔记java学习笔记
    文章目录第3部分方法设计和实现一、前言二、方法设计和实现最佳实践1.方法的参数要尽量少2.避免使用过多的返回值3.避免在方法中返回null4.方法要尽量做到单一职责5.使用合适的访问修饰符6.避免方法内部的过多的条件分支7.使用适当的异常处理8.考虑方法的线程安全性三、小结第3部分方法设计和实现一、前言《EffectiveJava》共有多个章节，每个章节提供了若干条建议或最佳实践，整理了对应章节关
  • 《手写Mybatis渐进式源码实践》实践笔记 (第三章 映射器的注册和使用) Suwg209 手写mybatismybatis笔记java数据库
    文章目录第3章映射器的注册和使用背景特点结构代码示例（Java）适用场景优点缺点目标设计实现工程代码类图实现步骤1.映射器注册机2.SqlSession标准定义和实现3.SqlSessionFactory工厂定义和实现测试事先准备测试用例测试结果总结第3章映射器的注册和使用背景工厂模式（FactoryMethodPattern）是一种创建型设计模式，它定义了一个用于创建对象的接口，但允许子类决定实
  • Langchain[6]-LangGraph:异步和流、图可视化、多智能体协作、LCEL代码生成 汀、人工智能 AIAgentlangchainAIAgentLangGraph多智能体协作AI智能体AI大模型Agent框架
    Langchain[6]-LangGraph:异步和流、图可视化、多智能体协作、LCEL代码生成1.异步和流因为任何大模型在推理的时候，都会有一定的时间延迟，这是由大模型的底层架构决定的，所以在很多应用，尤其是对话应用中，使用异步以及流式输出，是大幅提升用户体验的较好方法。在langGraph中可以很方便的实现异步和流，简单例子为例：异步调用方法：inputs={"messages"
  • 原型模式详解与实践 咖啡の猫 原型模式设计模式
    在软件开发的奇妙世界里，我们常常面临重复创建相似对象的任务。如果每次创建都要从头开始设置各种属性和状态，不仅繁琐，还可能降低效率。原型模式就像一位神奇的魔法师，为我们提供了一种通过复制现有对象来创建新对象的优雅方式。它不仅能提高对象创建的效率，还能简化代码结构，让我们在开发过程中更加得心应手。本文将深入探讨原型模式的奥秘，带您领略其在实际应用中的魅力。一、原型模式的定义与概念原型模式是一种创建型设
  • 解释器模式 咖啡の猫 解释器模式设计模式
    在软件开发的诸多场景中，我们有时需要处理特定领域的语言或表达式。例如，在数据库查询中，我们使用SQL语句来查询数据；在数学计算软件里，需要解析和计算各种数学表达式。解释器模式（InterpreterPattern）应运而生，它提供了一种将语言中的语句表示为对象，并为这些语句定义解释方法的方式，从而使我们能够在程序中解释和执行特定领域的语言。解释器模式概述解释器模式是一种行为型设计模式，它用于定义一
  • 状态模式 咖啡の猫 状态模式设计模式
    在软件开发过程中，我们经常会遇到这样的情况：一个对象的行为会随着其内部状态的改变而发生变化。例如，一个手机在不同状态下（开机、关机、静音等）对相同的操作（如来电）会有不同的反应。传统的解决方案可能会使用大量的条件判断语句（如if-else或switch-case）来处理不同状态下的行为，但这种方式会使代码变得臃肿、难以维护和扩展。状态模式（StatePattern）应运而生，它提供了一种优雅的方式
  • Java中的注解 RB_VER Java基础java编程语言
    为什么要引入注解？使用【注解】之前(甚至在使用之后)，【XML】被广泛的应用于描述元数据，得到各大框架的青睐，它以松耦合的方式完成了框架中几乎所有的配置，但是随着项目越来越庞大，【XML】的内容也越来越复杂，一些应用开发人员和架构师发现维护成本变高。他们希望使用一些和代码紧耦合的东西，于是就有人提出来一种标记式高耦合的配置方式【注解】。方法上可以进行注解，类上也可以注解，字段属性上也可以注解，反正
  • 在 Python 中，`typing` 模块提供了类型提示（Type Hints）的功能，可以用来标记变量、函数参数和返回值等的类型，Any, Dict, List, Literal, Optiona 愚昧之山绝望之谷开悟之坡 笔记pythonpython开发语言
    在Python中，typing模块提供了类型提示（TypeHints）的功能，可以用来标记变量、函数参数和返回值等的类型。下面是typing模块中几个常用的类型的详细解释和举例。Any类型表示一个可以是任何类型的值，它可以作为变量的类型、函数的参数类型或返回类型等。这个类型通常用于那些无需考虑类型约束，或是需要通过检查变量类型来进行调试的代码中。以下是一个使用Any类型的例子：fromtyping
  • ESP32-S3模组上跑通esp32-camera（30） 蓝天居士 ESP32-S3ESP32-S3camerasensorOV5640
    接前一篇文章：ESP32-S3模组上跑通esp32-camera（29）一、OV5640初始化2.相机初始化及图像传感器配置上一回解析完了camera_probe函数的第6段代码，本回继续往下解析该函数后续内容。为了便于理解和回顾，再次贴出camera_probe函数源码，在components/esp32-camera/driver/esp_camera.c中，如下：staticesp_err_
  • 密码学领域三大经典难题：DLP、IFP 与 ECDLP 软件职业规划 经典难题密码学网络服务器
    离散对数问题（DLP）基本概念：在有限循环群GGG（通常是整数模ppp乘法群Zp∗Z_p^*Zp∗，其中ppp为素数）中，给定一个生成元ggg和元素h=gxh=g^xh=gx（xxx为整数），离散对数问题是求出整数xxx。例如，在群Z17∗Z_{17}^*Z17∗中，生成元g=3g=3g=3，如果h=12h=12h=12，要求出满足3x≡12(mod17)3^x\equiv12\(mod\17)3
  • 简单的基于Spring Cloud和Vue的示例项目结构及部分关键代码 软件职业规划 springspringcloudvue.jsspring
    后端（SpringCloud部分）1.创建SpringCloud项目（以SpringCloudGateway和SpringCloudEureka为例）首先，使用SpringInitializr创建一个基础的SpringBoot项目，并添加相关的SpringCloud依赖，比如：spring-cloud-starter-gateway：用于实现API网关功能。spring-cloud-starter
  • 图像处理算法研究的程序框架 mickey0380 系统调用图像处理算法程序框架Windows
    目录1程序框架简介2C#图像读取、显示、保存模块3C动态库图像算法模块4C#调用C动态库5演示Demo5.1开发环境5.2功能介绍5.3下载地址参考1程序框架简介一个图像处理算法研究的常用程序逻辑框架，如下图所示在该框架中，将图像处理算法产品分为上层模块和底层模块两个部分。底层模块使用C/C++实现算法API，提供给上层模块调用；上层模块执行调用API和一些界面功能的实现，最后得到不同平台的软件产
  • 图像处理之颜色空间小结 AI洲抿嘴的薯片 opencv算法专题图像处理人工智能
    1.介绍在图像处理中，我们会遇到各式各样的颜色空间，比如RGB、HLS、HSV、HSB、YCrCb、CIEXYZ、CIELab，那么它们的区别和应用场所又在哪里呢？1）RGB是生活中最常见的颜色空间，其中，R代表红色通道，G代表绿色通道，B代表蓝色通道，它们之间的相互搭配组合256*256*256，几乎可以包括人类视力所能感知的所有颜色。应用场所：一般的彩色图片都是用RGB三通道来表示，另外，在深
  • 深入解析华为OD机试：开放日活动“取出尽量少的球”题解及C++、Java、JavaScript、Python详细实现 m0_57781768 华为odc++java
    深入解析华为OD机试：开放日活动“取出尽量少的球”题解及C++、Java、JavaScript、Python详细实现在华为OD机试的算法考题中，字符串处理、动态规划、二分查找等算法问题都频繁出现。这不仅是为了考查面试者的算法基础，还要求能够通过高效的逻辑思维解决问题。今天我们将深度分析一道关于“取出尽量少的球”的题目，并通过C++、Java、JavaScript、Python四种编程语言详细解析和
  • Java 入门指南：集合概述 ZachOn1y Javajava开发语言后端eclipsejava-ee
    Java集合概述Java集合（Collections）是Java中提供的一种容器，用于存储和管理多个对象。与数组不同，集合的长度是可变的，且只能存储对象（包括对象的引用），不能存储基本数据类型。集合是Java编程中非常重要的一部分，特别是在处理大量数据时，集合提供了丰富的操作方法和灵活的数据结构。Java集合的体系结构Java集合，也叫作容器，主要是由两大接口派生而来：一个是Collection接
  • Direct Preference Optimization (DPO): 一种无需强化学习的语言模型偏好优化方法 Yuleave 论文学习语言模型人工智能自然语言处理
    论文地址：https://arxiv.org/pdf/2305.182901.背景与挑战近年来，大规模无监督语言模型（LM）在知识获取和推理能力方面取得了显著进展，但如何精确控制其行为仍是一个难题。现有的方法通常通过**强化学习从人类反馈（RLHF）**来引导模型行为，但RLHF存在以下问题：复杂性高：RLHF需要先训练一个奖励模型来反映人类偏好，然后使用强化学习来微调语言模型，使其在最大化奖励的
  • 物联网网关Web服务器--CGI开发接口 国产化创客 物联网Web服务器嵌入式项目服务器物联网web网关
    1、CGI(公用网关接口)CGI(公用网关接口)规定了Web服务器调用其他可执行程序(CGI程序)的接口协议标准。Web服务器通过调用CGI程序实现和Web浏览器的交互,也就是CGI程序接受Web浏览器发送给Web服务器的信息,进行处理,将响应结果再回送给Web服务器及Web浏览器。CGI程序一般完成Web网页中表单(Form)数据的处理、数据库查询和实现与传统应用系统的集成等工作。CGI程序可以
  • mysql直接在sql中将分组查询出来的多个属性的list，拼接成一个字符串，最后的结果只要一个大的字符串 CURRY30_1 mysqlsql数据库
    如果你想要的是将所有分组的结果进一步合并成一个单独的、巨大的字符串（即整个查询结果只返回一个字符串），那么你需要借助子查询或者应用程序层面的逻辑。在纯SQL中，这通常不是直接支持的功能，因为SQL是为返回结果集而设计的，而不是单一字符串。SELECTGROUP_CONCAT(singleResSEPARATOR'\n')ASlastResFROM(selectCONCAT('field1:',yo
  • C++设计模式——Strategy策略模式 程序员与背包客_CoderZ C/C++设计模式c++设计模式策略模式c语言开发语言
    一，策略模式简介策略模式是一种行为型设计模式，策略模式在软件开发场景中定义了一系列的算法，并将每个算法单独封装在可替换的对象中，使应用程序在运行时可以根据具体的上下文来动态地选择和切换算法，同时保持原有的代码架构不被修改。策略模式的设计使得算法的实现与调用被分离，让算法可以独立于外部客户端进行开发和改动，使用独立的类来封装特定的算法，也避免了不同算法策略之间的互相影响。策略模式能适应多种应用场景，
  • HSM能为区块链、IoT等新兴技术提供怎样的保护？ Anna_Tong 区块链物联网iothsm数据加密
    随着区块链和物联网（IoT）技术的快速发展，数据安全已成为最为关键的挑战之一。在这些技术的应用中，涉及到大量的敏感数据和交易信息，因此如何确保数据的机密性、完整性和真实性，成为了亟待解决的问题。硬件安全模块（HSM）作为一种高度安全的加密服务技术，正日益成为保障区块链和IoT技术安全的核心工具。HSM具体能为区块链和IoT做些什么？它又是如何保护这些技术免受安全威胁的呢？HSM在区块链中的应用：密
  • TOMCAT在POST方法提交参数丢失问题 357029540 javatomcatjsp
    摘自http://my.oschina.net/luckyi/blog/213209 昨天在解决一个BUG时发现一个奇怪的问题，一个AJAX提交数据在之前都是木有问题的，突然提交出错影响其他处理流程。 检查时发现页面处理数据较多，起初以为是提交顺序不正确修改后发现不是由此问题引起。于是删除掉一部分数据进行提交，较少数据能够提交成功。 恢复较多数据后跟踪提交FORM DATA ，发现数
  • 在MyEclipse中增加JSP模板 删除-2008-08-18 ljy325 jspxmlMyEclipse
    在D:\Program Files\MyEclipse 6.0\myeclipse\eclipse\plugins\com.genuitec.eclipse.wizards_6.0.1.zmyeclipse601200710\templates\jsp  目录下找到Jsp.vtl，复制一份，重命名为jsp2.vtl,然后把里面的内容修改为自己想要的格式，保存。 然后在 D:\Progr
  • JavaScript常用验证脚本总结 eksliang JavaScriptjavaScript表单验证
         转载请出自出处：http://eksliang.iteye.com/blog/2098985        下面这些验证脚本，是我在这几年开发中的总结，今天把他放出来，也算是一种分享吧，现在在我的项目中也在用！包括日期验证、比较，非空验证、身份证验证、数值验证、Email验证、电话验证等等...! &nb
  • 微软BI（4） 18289753290 微软BI SSIS
    1） Q:查看ssis里面某个控件输出的结果：  A MessageBox.Show(Dts.Variables["v_lastTimestamp"].Value.ToString()); 这是我们在包里面定义的变量 2):在关联目的端表的时候如果是一对多的关系，一定要选择唯一的那个键作为关联字段。 3) Q：ssis里面如果将多个数据源的数据插入目的端一
  • 定时对大数据量的表进行分表对数据备份 酷的飞上天空 大数据量
    工作中遇到数据库中一个表的数据量比较大，属于日志表。正常情况下是不会有查询操作的，但如果不进行分表数据太多，执行一条简单sql语句要等好几分钟。。   分表工具：linux的shell + mysql自身提供的管理命令 原理：使用一个和原表数据结构一样的表，替换原表。   linux shell内容如下： =======================开始 
  • 本质的描述与因材施教 永夜-极光 感想随笔
             不管碰到什么事,我都下意识的想去探索本质,找寻一个最形象的描述方式。        我坚信,世界上对一件事物的描述和解释,肯定有一种最形象,最贴近本质,最容易让人理解        &
  • 很迷茫。。。 随便小屋 随笔
    小弟我今年研一，也是从事的咱们现在最流行的专业（计算机）。本科三流学校，为了能有个更好的跳板，进入了考研大军，非常有幸能进入研究生的行业（具体学校就不说了，怕把学校的名誉给损了）。   先说一下自身的条件，本科专业软件工程。主要学习就是软件开发，几乎和计算机没有什么区别。因为学校本身三流，也就是让老师带着学生学点东西，然后让学生毕业就行了。对专业性的东西了解的非常浅。就那学的语言来说
  • 23种设计模式的意图和适用范围 aijuans 设计模式
    Factory Method 意图 定义一个用于创建对象的接口，让子类决定实例化哪一个类。Factory Method 使一个类的实例化延迟到其子类。 　　适用性 当一个类不知道它所必须创建的对象的类的时候。 　　当一个类希望由它的子类来指定它所创建的对象的时候。 　　当类将创建对象的职责委托给多个帮助子类中的某一个，并且你希望将哪一个帮助子类是代理者这一信息局部化的时候。 Abstr
  • Java中的synchronized和volatile aoyouzi javavolatilesynchronized
    说到Java的线程同步问题肯定要说到两个关键字synchronized和volatile。说到这两个关键字，又要说道JVM的内存模型。JVM里内存分为main memory和working memory。 Main memory是所有线程共享的，working memory则是线程的工作内存，它保存有部分main memory变量的拷贝，对这些变量的更新直接发生在working memo
  • js数组的操作和this关键字 百合不是茶 js数组操作this关键字
    js数组的操作;   一:数组的创建: 1、数组的创建 var array = new Array();　//创建一个数组 var array = new Array([size]);　//创建一个数组并指定长度，注意不是上限，是长度 var arrayObj = new Array([element0[, element1[, ...[, elementN]]]
  • 别人的阿里面试感悟 bijian1013 面试分享工作感悟阿里面试
    原文如下：http://greemranqq.iteye.com/blog/2007170         一直做企业系统，虽然也自己一直学习技术，但是感觉还是有所欠缺，准备花几个月的时间，把互联网的东西，以及一些基础更加的深入透析，结果这次比较意外，有点突然，下面分享一下感受吧！    &nb
  • 淘宝的测试框架Itest Bill_chen springmaven框架单元测试JUnit
    Itest测试框架是TaoBao测试部门开发的一套单元测试框架，以Junit4为核心， 集合DbUnit、Unitils等主流测试框架，应该算是比较好用的了。 近期项目中用了下，有关itest的具体使用如下： 1.在Maven中引入itest框架： <dependency>   <groupId>com.taobao.test</groupId&g
  • 【Java多线程二】多路条件解决生产者消费者问题 bit1129 java多线程
    package com.tom; import java.util.LinkedList; import java.util.Queue; import java.util.concurrent.ThreadLocalRandom; import java.util.concurrent.locks.Condition; import java.util.concurrent.loc
  • 汉字转拼音pinyin4j 白糖_ pinyin4j
    以前在项目中遇到汉字转拼音的情况，于是在网上找到了pinyin4j这个工具包，非常有用，别的不说了，直接下代码：   import java.util.HashSet; import java.util.Set; import net.sourceforge.pinyin4j.PinyinHelper; import net.sourceforge.pinyin
  • org.hibernate.TransactionException: JDBC begin failed解决方案 bozch ssh数据库异常DBCP
    org.hibernate.TransactionException: JDBC begin failed:     at org.hibernate.transaction.JDBCTransaction.begin(JDBCTransaction.java:68)    at org.hibernate.impl.SessionImp
  • java-并查集（Disjoint-set）-将多个集合合并成没有交集的集合 bylijinnan java
    import java.util.ArrayList; import java.util.Arrays; import java.util.HashMap; import java.util.HashSet; import java.util.Iterator; import java.util.List; import java.util.Map; import java.ut
  • Java PrintWriter打印乱码 chenbowen00 java
    一个小程序读写文件，发现PrintWriter输出后文件存在乱码，解决办法主要统一输入输出流编码格式。 读文件： BufferedReader 从字符输入流中读取文本，缓冲各个字符，从而提供字符、数组和行的高效读取。 可以指定缓冲区的大小，或者可使用默认的大小。大多数情况下，默认值就足够大了。 通常，Reader 所作的每个读取请求都会导致对基础字符或字节流进行相应的读取请求。因
  • [天气与气候]极端气候环境 comsci 环境
          如果空间环境出现异变...外星文明并未出现,而只是用某种气象武器对地球的气候系统进行攻击,并挑唆地球国家间的战争,经过一段时间的准备...最大限度的削弱地球文明的整体力量,然后再进行入侵......      那么地球上的国家应该做什么样的防备工作呢?  &n
  • oracle order by与union一起使用的用法 daizj UNIONoracleorder by
    当使用union操作时，排序语句必须放在最后面才正确，如下： 只能在union的最后一个子查询中使用order by，而这个order by是针对整个unioning后的结果集的。So： 如果unoin的几个子查询列名不同，如 Sql代码  select supplier_id, supplier_name  from suppliers  UNI
  • zeus持久层读写分离单元测试 deng520159 单元测试
    本文是zeus读写分离单元测试,距离分库分表,只有一步了.上代码: 1.ZeusMasterSlaveTest.java package com.dengliang.zeus.webdemo.test; import java.util.ArrayList; import java.util.List; import org.junit.Assert; import org.j
  • Yii 截取字符串(UTF-8) 使用组件 dcj3sjt126com yii
    1.将Helper.php放进protected\components文件夹下。 2.调用方法：   Helper::truncate_utf8_string($content,20,false);   //不显示省略号  Helper::truncate_utf8_string($content,20);  //显示省略号  &n
  • 安装memcache及php扩展 dcj3sjt126com PHP
    安装memcache    tar zxvf memcache-2.2.5.tgz     cd memcache-2.2.5/     /usr/local/php/bin/phpize (?)    ./configure --with-php-confi
  • JsonObject 处理日期 feifeilinlin521 javajsonJsonOjbectJsonArrayJSONException
        写这边文章的初衷就是遇到了json在转换日期格式出现了异常 net.sf.json.JSONException: java.lang.reflect.InvocationTargetException  原因是当你用Map接收数据库返回了java.sql.Date 日期的数据进行json转换出的问题话不多说  直接上代码  &n
  • Ehcache（06）——监听器 234390216 监听器listenerehcache
    监听器          Ehcache中监听器有两种，监听CacheManager的CacheManagerEventListener和监听Cache的CacheEventListener。在Ehcache中，Listener是通过对应的监听器工厂来生产和发生作用的。下面我们将来介绍一下这两种类型的监听器。  
  • activiti 自带设计器中chrome 34版本不能打开bug的解决 jackyrong Activiti
      在acitivti modeler中，如果是chrome 34，则不能打开该设计器，其他浏览器可以， 经证实为bug，参考 http://forums.activiti.org/content/activiti-modeler-doesnt-work-chrome-v34 修改为，找到 oryx.debug.js 在最头部增加 if (!Document.
  • 微信收货地址共享接口-终极解决 laotu5i0 微信开发
       最近要接入微信的收货地址共享接口，总是不成功，折腾了好几天，实在没办法网上搜到的帖子也是骂声一片。我把我碰到并解决问题的过程分享出来，希望能给微信的接口文档起到一个辅助作用，让后面进来的开发者能快速的接入，而不需要像我们一样苦逼的浪费好几天，甚至一周的青春。各种羞辱、谩骂的话就不说了，本人还算文明。    如果你能搜到本贴，说明你已经碰到了各种 ed
  • 关于人才 netkiller.github.com 工作面试招聘netkiller人才
    关于人才 每个月我都会接到许多猎头的电话，有些猎头比较专业，但绝大多数在我看来与猎头二字还是有很大差距的。 与猎头接触多了，自然也了解了他们的工作，包括操作手法，总体上国内的猎头行业还处在初级阶段。 总结就是“盲目推荐，以量取胜”。 目前现状 许多从事人力资源工作的人，根本不懂得怎么找人才。处在人才找不到企业，企业找不到人才的尴尬处境。 企业招聘，通常是需要用人的部门提出招聘条件，由人
  • 搭建 CentOS 6 服务器 - 目录 rensanning centos
    (1) 安装CentOS ISO（desktop/minimal）、Cloud（AWS/阿里云）、Virtualization（VMWare、VirtualBox） 详细内容 (2) Linux常用命令 cd、ls、rm、chmod...... 详细内容 (3) 初始环境设置 用户管理、网络设置、安全设置...... 详细内容 (4) 常驻服务Daemon
  • 【求助】mongoDB无法更新主键 toknowme mongodb
      Query query = new Query();          query.addCriteria(new Criteria("_id").is(o.getId()));                &n
  • jquery 页面滚动到底部自动加载插件集合 xp9802 jquery
    很多社交网站都使用无限滚动的翻页技术来提高用户体验，当你页面滑到列表底部时候无需点击就自动加载更多的内容。下面为你推荐 10 个 jQuery 的无限滚动的插件： 1. jQuery ScrollPagination jQuery ScrollPagination plugin 是一个 jQuery 实现的支持无限滚动加载数据的插件。 2. jQuery Screw S
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他