1遇到的问题:
在我写datax的json配置文件时:需要写select字段名1,字段名2……..from表名;
也可以写select * from表名;
但是*容易出现问题是若表的结构发生变化,那么脚本就报错:找不到某某字段;字段不一致;
如图:
解决方法:
在MySQL中,需要以逗号拼接一个表的所有字段:
SELECT GROUP_CONCAT(COLUMN_NAME SEPARATOR ",") FROM information_schema.COLUMNS
WHERE TABLE_SCHEMA = 'db_name' AND TABLE_NAME = 'table_name';
2遇到的问题:在开发过程中,数据操加减乘除不在服务器端中操作,在数据库端处理?
怎么办呢?
解决办法:
写存储过程,在存储过程中使用使用SELECT …INTO语句为变量赋值
如:
create procedure getMsg ()
Begin
declare v_title varchar(30);
declare v_content varchar(100);
select title,content into v_title,v_content from news where artId=333;
End
使用存储过程哭笑不得的事情:
在生产环境下,可以通过直接修改存储过程的方式修改业务逻辑(或bug),而不用重启服务器。但这一点便利被许多人滥用了。有人直接就在正式服务器上修改存储过程,而没有经过完整的测试,后果非常严重。
3遇到问题
统计数据时需要拆分日期,只要年,或只要月,或只要日,或者周,怎么办呢?
或在日期上提前一天,一月,一年怎么办呢?
Mysql的日期:
1、SELECT NOW(),CURDATE(),CURTIME()
NOW() CURDATE() CURTIME()
2018-06-24 09:54:57 2018-06-24 09:54:57
2、EXTRACT() 函数用于返回日期/时间的单独部分,比如年、月、日、小时、分钟等等。
EXTRACT(unit FROM date)
例如:
SELECT EXTRACT(YEAR FROM memb_registertime) AS OrderYear,
EXTRACT(MONTH FROM memb_registertime) AS OrderMonth,
EXTRACT(DAY FROM memb_registertime) AS OrderDay
FROM t_member a
WHERE memb_gagaid=70000000;
在开发中还遇到这样的问题:统计用户的登录log;可是原始数据是这样的
这怎么统计呢?我们需要的是这样的
写sql :
select a.Member,
concat(date_format(a.Date,'%Y-%m-%d'),' ',substring_index(substring_index(a.DateTime,',',b.help_topic_id),',',-1)),
a.IP,a.Address,a.LoggingType,a.VisitUrl,a.Mac,a.Port,a.Trait
from
gaga_asdear_memberlogging a
join
help_topic b
on b.help_topic_id <=(length(a.DateTime) - length(replace(a.DateTime,',',''))+1)
where substring_index(substring_index(a.DateTime,',',b.help_topic_id),',',-1) !=""
and UNIX_TIMESTAMP(DATE_ADD(a.Date,INTERVAL +8 HOUR))>=1483200000 and UNIX_TIMESTAMP(DATE_ADD(a.Date,INTERVAL +8 HOUR))<1517414400
order by a.Member;
注意这里需要一个辅助表:help_topic;要求它是自增id假如500条,id从0到500
3、DATE_ADD()函数向日期添加指定的时间间隔;DATE_SUB()函数从日期减去指定的时间间隔。
例如:
SELECT OrderId,DATE_ADD(OrderDate,INTERVAL 2 DAY)AS OrderPayDate
FROM Orders
4遇到的问题:只看到了表,却没有看到标的尾部;
这个是啥东西呢?
Mysql:存储引擎;
MYISAM和INNODB是Mysql数据库提供的两种存储引擎。两者的优劣可谓是各有千秋。INNODB会支持一些关系数据库的高级功能,如事务功能和行级锁,MYISAM不支持。MYISAM的性能更优,占用的存储空间少。所以,选择何种存储引擎,视具体应用而定:
1)如果你的应用程序一定要使用事务,毫无疑问你要选择INNODB引擎。但要注意,INNODB的行级锁是有条件的。在where条件没有使用主键时,照样会锁全表。比如DELETE FROM mytable这样的删除语句。
2)如果你的应用程序对查询性能要求较高,就要使用MYISAM了。MYISAM索引和数据是分开的,而且其索引是压缩的,可以更好地利用内存。所以它的查询性能明显优于INNODB。压缩后的索引也能节约一些磁盘空间。MYISAM拥有全文索引的功能,这可以极大地优化LIKE查询的效率。
从MySQL5.5.5以后,InnoDB是默认引擎
怎么修改数据库引擎:
alter table table_name engine=myisam;
再比如
这又是啥呢?
UNION
当您想要把一组相同的表当作一个表使用时,采用UNION。UNION仅适用于MERGE表。对于您映射到一个MERGE表上的表,您必须拥有SELECT, UPDATE和DELETE权限。
INSERT_METHOD
如果您希望在MERGE表中插入数据,您必须用INSERT_METHOD指定应插入行的表。INSERT_METHOD选项仅用于MERGE表。使用FIRST或LAST把行插入到第一个或最后一个表中;
例如:创建merge表:
CREATE TABLE `allcomment` (
`id` INT(8) NOT NULL AUTO_INCREMENT,
`blogUser` VARCHAR(20) NOT NULL,
`replayUser` VARCHAR(20) NOT NULL,
`articleId` INT(8) NOT NULL DEFAULT '0',
`content` TEXT,
`addTime` DATETIME NOT NULL,
PRIMARY KEY (`id`),
KEY `addTime` (`addTime`),
KEY `replayUser` (`replayUser`)
) ENGINE=MERGE UNION (comment1, comment2) INSERT_METHOD=LAST AUTO_INCREMENT=1 ;