- Shell 读取 mysql 数据到CSV
__BOOM__
shellshell数据导出csv
csv文件以逗号分隔符#!/bin/bashMYSQL_HOSTNAME="xx.xx.xx.xx"MYSQL_PORT=3306MYSQL_USER="sss"MYSQL_PWD="xxxxxx"MYSQL_DB="ddd"#文件的保存路径,路径后要加/RESULT_PATH1="/home/sun/"#================================执行内容==========
- Peewee基本使用
python开发爱好者
peewee1024程序员节
Peewee即PythonOMR框架之一。peewee安装&配置通过pipinstllpeewee新建models.py模型文件在models.py中加入以下基础代码运行models.py,在mysql中生成new_record表peewee使用frompeeweeimport*fromsettingsimportDATABASES//连接数据库MYSQL_DB=MySQLDatabase(hos
- 【有关mysql定时备份脚本文件】
还算善良_
mysql数据库linux
工作中有的客户要求,数据库必须有备份机制,这里总结了一些通用系统的备份文件,可以在windos、mac、Linux环境下运行bash#!/bin/bash#配置MYSQL_USER='root'MYSQL_PASS='123456'MYSQL_HOST='localhost'MYSQL_PORT='3306'MYSQL_DB='mydatabase'#检查系统类型OS=$(uname-s)#定义备
- Python Scrapy连接MySQL
lczalh
1.在settings.py文件下定义数据库信息字段mysql_host='127.0.0.1'mysql_user='root'mysql_db='pad_woll'mysql_db_charset='utf8'mysql_password='123456'2.在pipelines.py文件下定义MySQL连接通道frompad_wool_crawlimportsettings//pad_woo
- Python MySQL 两种方式连接数据库pymysql/sqlalchemy连接mysql数据库
喜马高
python数据库mysqlsql
pymysqlimportpymysqlhost="127.0.0.1:3306"user="root"password="root"database="test"mysql_db=pymysql.connect(host=host,user=user,password=password,database=database,charset="utf8")mysql_cursor=mysql_db.
- 利用python查询mysql数据库表中数据并生成为csv文件
梦想就是摸鱼
mysqlpython数据库
需求:从mysql数据库中查询某表的数据,并将表中数据生成csv文件保存在指定文件下。话不多说,直接上代码:importpymysqlfromsettingsimportMYSQL_HOST,MYSQL_DB,MYSQL_PWD,MYSQL_USERimportcsvdefmysql_db_sz_stock():#连接数据库connect=pymysql.connect(host=MYSQL_HO
- Docker compose 配置 mysql emoji 支持
佰晟
Docker-compose.yml文中配置如下#mysql-db:mysql_db:image:mysql:5.7volumes:-/_share/master_db:/var/lib/mysqlenvironment:-MYSQL_ROOT_PASSWORD=password-MYSQL_DATABASE=dbnameports:-"3399:3306"command:mysqld--char
- python pymysql库的常用操作
批量插入importpymysqldefinsert_to_mysql(to_db_list):mysql_db=pymysql.connect(host="HOST_IP",port=3306,user="username",password="password",database="db",charset="utf8")cursor=mysql_db.cursor()sql="INSERTIN
- shell编程综合案例,定时维护数据库
冷囧囧
shell编程综合案例定时维护数据库
shell编程综合案例,定时维护数据库需求/要求1)每天凌晨2:15备份数据库testDB到/data/backup/db2)备份开始和备份结束能够给出相应的提示信息3)备份后的文件要求以备份时间为文件名,并打包成.tar.gz的形式,比如:2018-12-05_021501.tar.gz4)在备份的同时,检查是否有10天前备份的数据库文件,如果有就将其删除编写一个shell脚本(mysql_db
- Mysqldump远程备份、恢复mysql数据库
抱抱熊
linux运维数据库mysql备份Mysqldump恢复
本地通过Mysqldump备份远程服务器上mysql的数据库:1、远程地址直接上shell脚本#!/bin/bashd=`date+'%Y%m%d_%H_%M_%S'`cd/mnt/mysql_dbmysqldump-hmysql.rds.aliyuncs.com-uuser-p'passwd'dbname|gzip>dbname.sql.gz_$drm-rf/mnt/mysql_db/cgwy.
- python 自动备份mysql数据库并上传到FTP服务器上
weixin_33694620
#!/usr/bin/envpythonimportsys,os,timefromftplibimportFTPmysql_usr='root'mysql_pwd='dingjia'mysql_db='test'mysql_charset='gb2312'bk_path='/home/hzhida/FTPFile/backup'logs_path=bk_path+'Logs'defwriteLog
- ansible-playbook实战之批量部署mysql主从同步
木讷大叔爱运维
运维自动化
###简介ansible-playbook实战之批量安装mysql介绍了如何批量安装mysql,本篇博文用于按照自定义的参数批量部署mysql主从同步。ansible-playbook配置思路:ansible配合使用mysql_user、mysql_db、mysql_replication在客户端创建数据库、创建用户及配置主从。###playbook的目录结构|____hosts|____mysq
- Ansible mysql_db模块
清欢渡.
Ansible
Ansiblemysql_db模块mysql_db模块用于建立、删除、导入和导出数据库1、建立数据库state=“present”----hosts:mysqltasks:-name:createadatabasemysql_db:login_host:"localhost"login_user:"root"login_password:"123.com"login_port:"3306"name
- openresty demo
曾柏超
ScreenShot2018-05-29at4.26.18PM.pnglocalmysql=require"resty.mysql"localcjson=require"cjson.safe"localtb_concat=table.concat--数据库查询方法localfunctiondb_query(sql)localmysql_db=mysql:new()--new对象mysql_db:s
- Java高级特性 - JDBC(上)
小李不努力
java初学EduCoder
第一关编程要求在右侧编辑器补充代码,完成下列相应任务:加载数据库驱动;【平台数据库连接的用户(user)为root,密码(password)为123123】创建数据库mysql_db;创建表student。student表结构为:|字段名|类型|备注|约束||:————:|:————:|:————:||id|int|学生id|非空||name|varchar(20)|学生姓名|无||sex|var
- ansible实现mysql数据库主从复制
那个萝卜在飘
ansible-playbook实战之批量部署mysql主从同步简介ansible-playbook实战之批量安装mysql介绍了如何批量安装mysql,本篇博文用于按照自定义的参数批量部署mysql主从同步。ansible-playbook配置思路:ansible配合使用mysql_user、mysql_db、mysql_replication在客户端创建数据库、创建用户及配置主从。playbo
- Educoder Java高级特性 - JDBC(下)
Junds0
javajavaphppython
第1关:指定类型JDBC封装(1)按照要求封装一个JDBC工具类在右侧编辑器补充代码,完成数据库连接、删除、更新以及查找方法。其中删除方法是通过用户传入新闻id来进行删除。注意:连接数据库名为mysql_db,数据库用户为root,密码为123123。packagestep1;importjava.sql.Connection;importjava.sql.DriverManager;import
- Python3学习:Error整理
虞锦雯
一、与MySQL数据库连接关于编码修改之前conn=pymysql.connect(host=MySql_Host_ip,port=MySql_Port,user=MySql_User,passwd=MySql_Password,db=MySql_Db)问题描述UnicodeEncodeError:'latin-1'codeccan'tencodecharactersinposition43-44
- PHP实现货币换算的方法
本文实例讲述了PHP实现货币换算的方法。分享给大家供大家参考。具体实现代码如下:复制代码代码如下:mysql_host=$host;$this->mysql_user=$user;$this->mysql_pass=$pass;$this->mysql_db=$db;$this->mysql_table=$tb;$this->checkLastUpdated();$conn=mysql_conne
- 发款php蜘蛛统计插件只要有mysql就可用
于是昨天便认真的做了一下,功能多一点,可以对各种搜索引擎统计分析。可以在多个时间段进行查看。其实代码很简单,为了更简洁些,代码压缩到6k.分为6个文件1.安装程序spilder_install.php安装插件";}else{echo"alert('链接出错!请检查数据库服务器配置!');history.go(-1);";}if(mysql_select_db($mysql_db,$link)){e
- mysql数据导入hive
meihao5
大数据
利用sqoop将线上mysql表导入hive的模板代码如下:source/etc/profile;sudo-uflightdevsqoopimport\--connectjdbc:mysql://127.0.0.1:3306/%(mysql_db)s?tinyInt1isBit=false\--usernameXXX\--passwordXXX\--table%(mysql_table)s\--c
- mysql conf配置
hanye韩也
mysqlconf配置mysql数据库
[mysqld_multi]mysqld=/data/mysql/bin/mysqld_safemysqladmin=/data/mysql/bin/mysqladmin#user=root#password=1[mysqld1]port=3306socket=/tmp/mysql3306.sockpid-file=/data/mysql_db/db_inst1/3306.piddatadir=/
- mysql conf配置
hanye韩也
mysqlconf配置mysql数据库
[mysqld_multi]mysqld=/data/mysql/bin/mysqld_safemysqladmin=/data/mysql/bin/mysqladmin#user=root#password=1[mysqld1]port=3306socket=/tmp/mysql3306.sockpid-file=/data/mysql_db/db_inst1/3306.piddatadir=/
- 执行"SET NAMES utf8"后仍然无法插入中文的原因
七木网络科技
今天搭建了运营用的服务器,发现访问服务器接口的时候,服务器返回nil。我就纳闷,为什么测试服务器没问题,而在这里却有问题?明明都是同样版本的软件啊,虽然安装软件的顺序不一样,但是也不至于啊。 然后就想起之前使用Openresty的lua_resty_mysql来访问mysql数据库时,执行mysql_db:query("SETNAMESutf8;")会有出错的现象,并且返回nil。
- linux 源码安装 mysql
sinat_16493273
系统centos下载>wgethttp://mirrors.sohu.com/mysql/MySQL-5.5/mysql-5.5.45.tar.gz创建用户groupaddmysqluseradd-r-gmysql-s/bin/falsemysql创建数据存储目录mkdir-p/data/mysql_dbchown-Rmysql:mysql/data/mysql_db安装cmake用来编译安装编译
- PHP面试题及答案(六)
PHP
1、使用php写一段简单查询,查出所有姓名为“张三”的内容并打印出来
表名User
Name Tel Content Date
张三 13333663366 大专毕业 2006-10-11
张三 13612312331 本科毕业 2006-10-15
张四 021-55665566 中专毕业 2006-10-15
请根据上面的题目完成代码:
$mysql_db = mys
- 【CI PDO】CI框架下 Mysql PDO 使用方法小记
snow_finland
mysqlPHPpdoCIci框架
1、设置pdo链接配置信息my_config.php$config['mysql_host']='mysql:dbname=test_db;host=127.0.0.1';
$config['mysql_username']='root';
$config['mysql_passwd']='1234';
$config['mysql_db']='test_db';
$config['dbdrive
- shell脚本(三)
Anonymous123
mysql自动备份脚本
自动备份数据库脚本#!/bin/bash#autobakcupmysql#by2015-7-2BAK_DIR="/data/backup/`date+%Y%m%d`"MYSQL_DB=discuzMYSQL_USER=rootMYSQL_PW=123456MYSQL_CMD=/usr/bin/mysqldumpif[$UID-ne0];thenecho"Musttobeuserootforruns
- shell脚本(三)
Anonymous123
mysql自动备份脚本
自动备份数据库脚本#!/bin/bash#autobakcupmysql#by2015-7-2BAK_DIR="/data/backup/`date+%Y%m%d`"MYSQL_DB=discuzMYSQL_USER=rootMYSQL_PW=123456MYSQL_CMD=/usr/bin/mysqldumpif[$UID-ne0];thenecho"Musttobeuserootforruns
- 为部门整理的mysql_db使用军规
caisini_vc
mysql_db使用军规:1、禁止开发测试人员在IDC环境手工删除和修改数据 2、所有需求通过DB工具系统提交 3、禁止在IDC环境DB进行测试 4、IDC环境提交的sql语句一定要经过非正式环境验证,且经过"explainsql;"检验过执行计划有走索引 5、IDC环境库表创建统一用小写,库表用英文简称,力求精简 6、禁止web机器直连DB 7、每条记录要保存数据的创建和修改时间,表通常要有主键
- Hadoop(一)
朱辉辉33
hadooplinux
今天在诺基亚第一天开始培训大数据,因为之前没接触过Linux,所以这次一起学了,任务量还是蛮大的。
首先下载安装了Xshell软件,然后公司给了账号密码连接上了河南郑州那边的服务器,接下来开始按照给的资料学习,全英文的,头也不讲解,说锻炼我们的学习能力,然后就开始跌跌撞撞的自学。这里写部分已经运行成功的代码吧.
在hdfs下,运行hadoop fs -mkdir /u
- maven An error occurred while filtering resources
blackproof
maven报错
转:http://stackoverflow.com/questions/18145774/eclipse-an-error-occurred-while-filtering-resources
maven报错:
maven An error occurred while filtering resources
Maven -> Update Proje
- jdk常用故障排查命令
daysinsun
jvm
linux下常见定位命令:
1、jps 输出Java进程
-q 只输出进程ID的名称,省略主类的名称;
-m 输出进程启动时传递给main函数的参数;
&nb
- java 位移运算与乘法运算
周凡杨
java位移运算乘法
对于 JAVA 编程中,适当的采用位移运算,会减少代码的运行时间,提高项目的运行效率。这个可以从一道面试题说起:
问题:
用最有效率的方法算出2 乘以8 等於几?”
答案:2 << 3
由此就引发了我的思考,为什么位移运算会比乘法运算更快呢?其实简单的想想,计算机的内存是用由 0 和 1 组成的二
- java中的枚举(enmu)
g21121
java
从jdk1.5开始,java增加了enum(枚举)这个类型,但是大家在平时运用中还是比较少用到枚举的,而且很多人和我一样对枚举一知半解,下面就跟大家一起学习下enmu枚举。先看一个最简单的枚举类型,一个返回类型的枚举:
public enum ResultType {
/**
* 成功
*/
SUCCESS,
/**
* 失败
*/
FAIL,
- MQ初级学习
510888780
activemq
1.下载ActiveMQ
去官方网站下载:http://activemq.apache.org/
2.运行ActiveMQ
解压缩apache-activemq-5.9.0-bin.zip到C盘,然后双击apache-activemq-5.9.0-\bin\activemq-admin.bat运行ActiveMQ程序。
启动ActiveMQ以后,登陆:http://localhos
- Spring_Transactional_Propagation
布衣凌宇
springtransactional
//事务传播属性
@Transactional(propagation=Propagation.REQUIRED)//如果有事务,那么加入事务,没有的话新创建一个
@Transactional(propagation=Propagation.NOT_SUPPORTED)//这个方法不开启事务
@Transactional(propagation=Propagation.REQUIREDS_N
- 我的spring学习笔记12-idref与ref的区别
aijuans
spring
idref用来将容器内其他bean的id传给<constructor-arg>/<property>元素,同时提供错误验证功能。例如:
<bean id ="theTargetBean" class="..." />
<bean id ="theClientBean" class=&quo
- Jqplot之折线图
antlove
jsjqueryWebtimeseriesjqplot
timeseriesChart.html
<script type="text/javascript" src="jslib/jquery.min.js"></script>
<script type="text/javascript" src="jslib/excanvas.min.js&
- JDBC中事务处理应用
百合不是茶
javaJDBC编程事务控制语句
解释事务的概念; 事务控制是sql语句中的核心之一;事务控制的作用就是保证数据的正常执行与异常之后可以恢复
事务常用命令:
Commit提交
- [转]ConcurrentHashMap Collections.synchronizedMap和Hashtable讨论
bijian1013
java多线程线程安全HashMap
在Java类库中出现的第一个关联的集合类是Hashtable,它是JDK1.0的一部分。 Hashtable提供了一种易于使用的、线程安全的、关联的map功能,这当然也是方便的。然而,线程安全性是凭代价换来的――Hashtable的所有方法都是同步的。此时,无竞争的同步会导致可观的性能代价。Hashtable的后继者HashMap是作为JDK1.2中的集合框架的一部分出现的,它通过提供一个不同步的
- ng-if与ng-show、ng-hide指令的区别和注意事项
bijian1013
JavaScriptAngularJS
angularJS中的ng-show、ng-hide、ng-if指令都可以用来控制dom元素的显示或隐藏。ng-show和ng-hide根据所给表达式的值来显示或隐藏HTML元素。当赋值给ng-show指令的值为false时元素会被隐藏,值为true时元素会显示。ng-hide功能类似,使用方式相反。元素的显示或
- 【持久化框架MyBatis3七】MyBatis3定义typeHandler
bit1129
TypeHandler
什么是typeHandler?
typeHandler用于将某个类型的数据映射到表的某一列上,以完成MyBatis列跟某个属性的映射
内置typeHandler
MyBatis内置了很多typeHandler,这写typeHandler通过org.apache.ibatis.type.TypeHandlerRegistry进行注册,比如对于日期型数据的typeHandler,
- 上传下载文件rz,sz命令
bitcarter
linux命令rz
刚开始使用rz上传和sz下载命令:
因为我们是通过secureCRT终端工具进行使用的所以会有上传下载这样的需求:
我遇到的问题:
sz下载A文件10M左右,没有问题
但是将这个文件A再传到另一天服务器上时就出现传不上去,甚至出现乱码,死掉现象,具体问题
解决方法:
上传命令改为;rz -ybe
下载命令改为:sz -be filename
如果还是有问题:
那就是文
- 通过ngx-lua来统计nginx上的虚拟主机性能数据
ronin47
ngx-lua 统计 解禁ip
介绍
以前我们为nginx做统计,都是通过对日志的分析来完成.比较麻烦,现在基于ngx_lua插件,开发了实时统计站点状态的脚本,解放生产力.项目主页: https://github.com/skyeydemon/ngx-lua-stats 功能
支持分不同虚拟主机统计, 同一个虚拟主机下可以分不同的location统计.
可以统计与query-times request-time
- java-68-把数组排成最小的数。一个正整数数组,将它们连接起来排成一个数,输出能排出的所有数字中最小的。例如输入数组{32, 321},则输出32132
bylijinnan
java
import java.util.Arrays;
import java.util.Comparator;
public class MinNumFromIntArray {
/**
* Q68输入一个正整数数组,将它们连接起来排成一个数,输出能排出的所有数字中最小的一个。
* 例如输入数组{32, 321},则输出这两个能排成的最小数字32132。请给出解决问题
- Oracle基本操作
ccii
Oracle SQL总结Oracle SQL语法Oracle基本操作Oracle SQL
一、表操作
1. 常用数据类型
NUMBER(p,s):可变长度的数字。p表示整数加小数的最大位数,s为最大小数位数。支持最大精度为38位
NVARCHAR2(size):变长字符串,最大长度为4000字节(以字符数为单位)
VARCHAR2(size):变长字符串,最大长度为4000字节(以字节数为单位)
CHAR(size):定长字符串,最大长度为2000字节,最小为1字节,默认
- [强人工智能]实现强人工智能的路线图
comsci
人工智能
1:创建一个用于记录拓扑网络连接的矩阵数据表
2:自动构造或者人工复制一个包含10万个连接(1000*1000)的流程图
3:将这个流程图导入到矩阵数据表中
4:在矩阵的每个有意义的节点中嵌入一段简单的
- 给Tomcat,Apache配置gzip压缩(HTTP压缩)功能
cwqcwqmax9
apache
背景:
HTTP 压缩可以大大提高浏览网站的速度,它的原理是,在客户端请求网页后,从服务器端将网页文件压缩,再下载到客户端,由客户端的浏览器负责解压缩并浏览。相对于普通的浏览过程HTML ,CSS,Javascript , Text ,它可以节省40%左右的流量。更为重要的是,它可以对动态生成的,包括CGI、PHP , JSP , ASP , Servlet,SHTML等输出的网页也能进行压缩,
- SpringMVC and Struts2
dashuaifu
struts2springMVC
SpringMVC VS Struts2
1:
spring3开发效率高于struts
2:
spring3 mvc可以认为已经100%零配置
3:
struts2是类级别的拦截, 一个类对应一个request上下文,
springmvc是方法级别的拦截,一个方法对应一个request上下文,而方法同时又跟一个url对应
所以说从架构本身上 spring3 mvc就容易实现r
- windows常用命令行命令
dcj3sjt126com
windowscmdcommand
在windows系统中,点击开始-运行,可以直接输入命令行,快速打开一些原本需要多次点击图标才能打开的界面,如常用的输入cmd打开dos命令行,输入taskmgr打开任务管理器。此处列出了网上搜集到的一些常用命令。winver 检查windows版本 wmimgmt.msc 打开windows管理体系结构(wmi) wupdmgr windows更新程序 wscrip
- 再看知名应用背后的第三方开源项目
dcj3sjt126com
ios
知名应用程序的设计和技术一直都是开发者需要学习的,同样这些应用所使用的开源框架也是不可忽视的一部分。此前《
iOS第三方开源库的吐槽和备忘》中作者ibireme列举了国内多款知名应用所使用的开源框架,并对其中一些框架进行了分析,同样国外开发者
@iOSCowboy也在博客中给我们列出了国外多款知名应用使用的开源框架。另外txx's blog中详细介绍了
Facebook Paper使用的第三
- Objective-c单例模式的正确写法
jsntghf
单例iosiPhone
一般情况下,可能我们写的单例模式是这样的:
#import <Foundation/Foundation.h>
@interface Downloader : NSObject
+ (instancetype)sharedDownloader;
@end
#import "Downloader.h"
@implementation
- jquery easyui datagrid 加载成功,选中某一行
hae
jqueryeasyuidatagrid数据加载
1.首先你需要设置datagrid的onLoadSuccess
$(
'#dg'
).datagrid({onLoadSuccess :
function
(data){
$(
'#dg'
).datagrid(
'selectRow'
,3);
}});
2.onL
- jQuery用户数字打分评价效果
ini
JavaScripthtmljqueryWebcss
效果体验:http://hovertree.com/texiao/jquery/5.htmHTML文件代码:
<!DOCTYPE html>
<html xmlns="http://www.w3.org/1999/xhtml">
<head>
<title>jQuery用户数字打分评分代码 - HoverTree</
- mybatis的paramType
kerryg
DAOsql
MyBatis传多个参数:
1、采用#{0},#{1}获得参数:
Dao层函数方法:
public User selectUser(String name,String area);
对应的Mapper.xml
<select id="selectUser" result
- centos 7安装mysql5.5
MrLee23
centos
首先centos7 已经不支持mysql,因为收费了你懂得,所以内部集成了mariadb,而安装mysql的话会和mariadb的文件冲突,所以需要先卸载掉mariadb,以下为卸载mariadb,安装mysql的步骤。
#列出所有被安装的rpm package rpm -qa | grep mariadb
#卸载
rpm -e mariadb-libs-5.
- 利用thrift来实现消息群发
qifeifei
thrift
Thrift项目一般用来做内部项目接偶用的,还有能跨不同语言的功能,非常方便,一般前端系统和后台server线上都是3个节点,然后前端通过获取client来访问后台server,那么如果是多太server,就是有一个负载均衡的方法,然后最后访问其中一个节点。那么换个思路,能不能发送给所有节点的server呢,如果能就
- 实现一个sizeof获取Java对象大小
teasp
javaHotSpot内存对象大小sizeof
由于Java的设计者不想让程序员管理和了解内存的使用,我们想要知道一个对象在内存中的大小变得比较困难了。本文提供了可以获取对象的大小的方法,但是由于各个虚拟机在内存使用上可能存在不同,因此该方法不能在各虚拟机上都适用,而是仅在hotspot 32位虚拟机上,或者其它内存管理方式与hotspot 32位虚拟机相同的虚拟机上 适用。
- SVN错误及处理
xiangqian0505
SVN提交文件时服务器强行关闭
在SVN服务控制台打开资源库“SVN无法读取current” ---摘自网络 写道 SVN无法读取current修复方法 Can't read file : End of file found
文件:repository/db/txn_current、repository/db/current
其中current记录当前最新版本号,txn_current记录版本库中版本