- python 写入mysql
C11611
technologypython
开发环境及工具:macjupyter-notebookimporttushareastsimportmatplotlib.pyplotaspltimportpandasaspdimportpymysql.cursorsimporttimeimportpymysqlimportnumpyasnpdefgetstockdata(stockid,starttime,endtime):df=ts.get_
- docker pull msyql5.6 并使用
开花沼泽.
dockeradb容器
dockerpullmsyql:5.6mkdir-p/root/mysql/mysqlconfvim/root/mysql/mysqlconf/my.cnf[mysqld]skip-host-cacheskip-name-resolvedatadir=/var/lib/mysqlinit_connect='SETcollation_connection=utf8_general_ci'init_c
- php 使用 LOAD DATA LOCAL INFILE方法插入测试数据
fanchengliang
参考网上LOADDATALOCALINFILE的使用方法,做了一个demo,记录下主要使用过程需求:往数据库表插入大量的测试数据主要步骤:1.生成一个需要的数据txt文件,这个文件大概长这样image.png(这里数据格式和样式在后面可根据自己需求修改)2.将这个文件使用LOADDATALOCALINFILE命令导入数据主要代码1.数据库连接//有一种mysqli的set_local_infile
- php操作mysql防止sql注入(合集)
get200
mysqlmysql注入
本文将从sql注入风险说起,并且比较addslashes、mysql_escape_string、mysql_real_escape_string、mysqli和pdo的预处理的区别。当一个变量从表单传入到php,需要查询mysql的话,需要进行处理。举例:$unsafe_variable=$_POST[‘user_input’];mysqli_query(“INSERTINTOtable(col
- python sql语句生成_python自动生成sql语句的脚本
weixin_39531183
pythonsql语句生成
描述:工作中在数据库中创建表时,当字段很多时,比较麻烦,开发一个工具,可在excel中写好字段英文名和中文名,然后通过py生成脚本或直接在库中生成表脚本:importtkinterfromtkinterimport*importtkinter.messageboxfromtkinterimportscrolledtextimportxlrdimportpymysqlimportos#从excel中
- MySql插入语句时报错,错误代码1062
SheldonChang
数据库mysqlsqlmybatis数据库
MySql插入语句时报错,错误代码1062mysql工具操作报错程序运行报错Cause:com.mysql.jdbc.exceptions.jdbc4.MySQLIntegrityConstraintViolationException:Duplicateentry‘123456’forkey‘order_number’;Duplicateentry‘123456’forkey‘order_num
- mysql 批处理速度_mysql批处理性能优化
martingalesquare
mysql批处理速度
参考了:http://blog.csdn.net/tolcf/article/details/52102849后来根据自己情况测试一次,结果如下。1、mysqlinsert####第一种测试情况batchSize=5000;connection.setAutoCommit(false);prepStatement.addBatch();##----测试结果如下----2016-09-1014:53
- 【Python奇遇记】Pymysql连接MySQL报TypeError
Robot_B
mysql数据库
Python连接mysql报TypeError问题:Python连接mysql时报TypeError:objectsupportingthebufferAPIrequired#数据库配置文件config_mysql.yamlhost:192.168.1.1port:3306user:test001passwd:123456db:test_dbcharset:utf8importpymysqlimp
- query()方法
左手码农
PHPMySQLsqlPHPquery
执行SQL命令,无论如何通过PHP脚本与Mysql数据库交互,过程都是一样的,创建一个SQL语句,再传递给执行查询的函数。在mysqli类中提供了几种执行SQL命令的方法,其中最常用的是query()方法。对于insert、update、delete等不会返回数据的SQL命令,query()方法在SQL命令成功执行时返回true。在此基础上还可以通过mysqli对象中的affected_rows属
- swift SQLite自封装
liu_yun_long
swiftsqlite
1.数据库封装类MySQLiteManagerimportFoundationimportSQLite3//数据库封装类classMySQLiteManager{privatevardb:OpaquePointer!//重写构造函数init(dbPath:String){letisSuccess=openDB(dbPath:dbPath)ifisSuccess{print("打开数据库成功")}e
- data_merge数据库合并
Haaaaaang
数据库sqlpython
importpymysqlimporttimeif__name__=='__main__':scs_db=pymysql.connect(host='XXXXXXXXXX',port=XXXXXXXXXX,user='XXXXXXXXXX',password='XXXXXXXXXX',db='XXXXXXXXXX',charset='utf8mb4')select_sql="""selectid+
- 第26期:索引设计(索引下推)
爱可生开源社区
image索引下推(INDEXCONDITIONPUSHDOWN,简称ICP)是MySQL5.6发布后针对扫描二级索引的一项优化改进。总的来说是通过把索引过滤条件下推到存储引擎,来减少MySQL存储引擎访问基表的次数以及MySQL服务层访问存储引擎的次数。ICP适用于MYISAM和INNODB,本篇的内容只基于INNODB。MySQLICP里涉及到的知识点如下:1.MySQL服务层:也就是SERV
- mysql双写原理_为什么别人能用好 MySQL?万字详解其复杂原理
邵老师说
mysql双写原理
原标题:为什么别人能用好MySQL?万字详解其复杂原理来源:简书-七把刀https://www.jianshu.com/p/d4cc0ea9d097MySQLInnoDB引擎现在广为使用,它提供了事务,行锁,日志等一系列特性,本文分析下InnoDB的内部实现机制,MySQL版本为5.7.24,操作系统为Debian9。MySQLInnoDB的实现非常复杂,本文只是总结了一些皮毛,希望以后能够研究的
- 三分钟教会你如何安装mysql
啦啦啦小脑瓜
MySQL安装与卸载mysql数据库
新手小白就选图形化,傻瓜式安装一、下载1.浏览器搜索mysql官网2.进入后点击下载3.下载页面往下翻找到MySQLCommunity(GPL)Downloads»4.进入后点击MySQLInstallerforWindows5.这时候我们会看到MySQL的最新版本是8.0.36,第一个是边下载边安装,在这里我们直接点击第二个下载就好。6.如果想要选择其他版本,我们可以点击上方的Archives,
- 【网络安全】红队渗透项目之Stapler1(下)
H_00c8
声明:本文仅用于技术讨论与研究,对于所有笔记中复现的这些终端或者服务器,都是自行搭建的环境进行渗透的。我将使用KaliLinux作为此次学习的攻击者机器。这里使用的技术仅用于学习教育目的,如果列出的技术用于其他任何目标,本站及作者概不负责。建议阅读上一篇后再来阅读本文!!!六、Mysql攻陷服务器1、mysqlINTOOUT文件上传MySQL中你可以使用SELECT...INTOOUTFILE语句
- MySQL数据库下载及安装教程
Y T
mysql
MySQL数据库是一款流行的开源关系型数据库管理系统,广泛应用于各种Web应用和企业级应用中。以下是MySQL数据库的下载及安装教程,包括Windows和Linux系统的基本步骤。Windows系统安装MySQL下载MySQL:访问MySQL官方网站的下载页面:MySQLCommunityDownloads选择适合你的Windows版本的MySQLInstaller,通常推荐下载“Windows(
- shell 监控mysql\nginx脚本
SkTj
1、mysql!/bin/shport=netstat-lnt|grep3306|wc-lif[$port-ne1];thenecho"mysqlisstop"/etc/init.d/mysqldstartelseecho"mysqlisstarting"fi2、监控Nginx!/bin/shport=netstat-lnt|grep80|wc-lif[$port-ne1];thenecho"ng
- MYSQL专题-MVCC多版本并发控制
程序届的伪精英
java理论与实践mysqlmvcc数据库
MVCC,全称Multi-VersionConcurrencyControl,即多版本并发控制。MVCC是一种并发控制的方法,一般在数据库管理系统中,实现对数据库的并发访问,在编程语言中实现事务内存。MVCC在MySQLInnoDB中的实现主要是为了提高数据库并发性能,用更好的方式去处理读-写冲突,做到即使有读写冲突时,也能做到不加锁,非阻塞并发读。基础概述数据库并发场景大致分为三种:读-读:不存
- PHP安装后错误处理
php
一:问题安装PHP后提示错误如下二:解决1:Warning:Module'mysqli'alreadyloadedinUnknownonline0解决原因:通过php.ini配置文件开启mysqli扩展的时候,开启了多次解决:将php.ini配置文件中多个extension=mysqli只保留一个。2:Deprecated:Directive'track_errors'isdeprecatedin
- 爬虫代码中的mysql使用
吕正日
mysql数据库爬虫
defget_data(item):mysqlinfo={"goods_name":"","goods_id":"","url":"","sales":"","normal_price":"","market_price":"","price_info":"","imgone":"","imgtwo":"","imgthree":"","tag_list":"","mall_name":"","m
- 【代码审计-3】PHP项目RCE及文件包含下载删除
阿福超级胖
小迪安全笔记php数据库mysql
漏洞关键字SQL注入:selectinsertupdatemysql_querymysqli等文件上传:$_FILES,type="file",上传,move_upload_file()等XSS跨站:printprint_rechosprintfdievar_dumpvar_export等文件包含:Includeinclude_oncerequirerequire_once等代码执行:evalas
- 面试官:小伙子,给我说一下mysql 乐观锁和悲观锁吧
前程有光
悲观锁介绍悲观锁,正如其名,它指的是对数据被外界(包括本系统当前的其他事务,以及来自外部系统的事务处理)修改持保守态度,因此,在整个数据处理过程中,将数据处于锁定状态。悲观锁的实现,往往依靠数据库提供的锁机制(也只有数据库层提供的锁机制才能真正保证数据访问的排他性,否则,即使在本系统中实现了加锁机制,也无法保证外部系统不会修改数据)。使用场景举例:以MySQLInnoDB为例商品goods表中有一
- PHP安装后错误处理
huaweichenai
php开发语言
一:问题安装PHP后提示错误如下二:解决1:Warning:Module'mysqli'alreadyloadedinUnknownonline0解决原因:通过php.ini配置文件开启mysqli扩展的时候,开启了多次解决:将php.ini配置文件中多个extension=mysqli只保留一个。2:Deprecated:Directive'track_errors'isdeprecatedin
- mysql的安装
别问我,我什么都不知道
mysql数据库
①官网下载mysql链接:MySQL::DownloadMySQLInstaller②选项配置点击next,再点击excute:继续点击next,直到配置页:自己配置一个密码:这页不用修改,直接点击next:点击next:点击excute:没有红叉,点击finish就完成安装了(这里注意路径和电脑用户名不能出现中文,否则可能会卡在startingtheserve):③注意事项如果你的路径或者用户名
- 并发下的库存如何扣?
码哥说
并发下的库存如何扣?背景业务反馈,项目出现库存超卖/负值现象。原因//简易demo$conn=mysqli_connect('localhost','root','123456','shop')ordie('数据库连接失败');$conn->query("SETNAMES'UTF8'");$query="SELECTnumFROMstockwhereid=1";$rs=$conn->query($
- MySQL完全备份脚本(基于python和shell)及MYSQL 密码修改重置修改密码等级
云计算小曹同学
mysql
MySQL完全备份脚本(注意:MySQL8.0以前的要用--master-data=2)一、基于windows的nsyql逐表备份(语言:python)fromurllib.requestimporturlopenimportreimporttimeimportdatetimeimportrandomimportlinecacheimportopenpyxlimportpymysqlimportr
- jumpserver启动时遇到的问题及解决方法
GUlGA
centosdocker
ERROR:forjms_kokoCannotstartservicekoko:driverfailedprogramming报错信息jms_mysqlisup-to-datejms_redisisup-to-dateCreatingjms_core...doneCreatingjms_guacamole...Creatingjms_celery...Creatingjms_koko...Crea
- python连接数据库
陈芝麻烂谷子的事
1.使用pymysql可以进行数据库的相关操作安装:pip3installPyMySQLimportpymysql#导入pyMySQL包db=pymysql.connect("host","username","password","databasename",charset="utf8")#连接数据库cursor=db.cursor()#创建一个游标数据库连接对象查询语句:select_sql=
- 你对MySQL的int(11)真的了解吗?
修己xj
mysqlmysql数据库
最近在网上看到一篇关于int(3)和int(11)区别的帖子,我第一反应这不就是它们之间主要涉及存储整型数据时所需的位数,即3位和11位的差异。然而,经过详细阅读文章并进行进一步的资料查询和测试后,我才发现我一直以来对于int(3)的理解存在误差。今天,我打算与家人分享这一新的认识。MYSQLint数据存储范围首先,需要明确的是,int(3)和int(11)都是表示整数类型,而不是定义整数的存储长
- 从PDO下的SQL注入思路到获得GIT 3000star项目0day
J0o1ey
网络安全代码审计sqlgitweb安全
0x01PDO简介PDO全名PHPDataObjectPDO扩展为PHP访问数据库定义了一个轻量级的一致接口。PDO提供了一个数据访问抽象层,这意味着,不管使用哪种数据库,都可以使用相同的函数(方法)来查询和获取数据。PHP连接MySQL数据库有三种方式(MySQL、Mysqli、PDO),列表性比较如下:MysqliPDOMySQL引入的PHP版本5.05.03.0之前PHP5.x是否包含是是是
- Linux的Initrd机制
被触发
linux
Linux 的 initrd 技术是一个非常普遍使用的机制,linux2.6 内核的 initrd 的文件格式由原来的文件系统镜像文件转变成了 cpio 格式,变化不仅反映在文件格式上, linux 内核对这两种格式的 initrd 的处理有着截然的不同。本文首先介绍了什么是 initrd 技术,然后分别介绍了 Linux2.4 内核和 2.6 内核的 initrd 的处理流程。最后通过对 Lin
- maven本地仓库路径修改
bitcarter
maven
默认maven本地仓库路径:C:\Users\Administrator\.m2
修改maven本地仓库路径方法:
1.打开E:\maven\apache-maven-2.2.1\conf\settings.xml
2.找到
 
- XSD和XML中的命名空间
darrenzhu
xmlxsdschemanamespace命名空间
http://www.360doc.com/content/12/0418/10/9437165_204585479.shtml
http://blog.csdn.net/wanghuan203/article/details/9203621
http://blog.csdn.net/wanghuan203/article/details/9204337
http://www.cn
- Java 求素数运算
周凡杨
java算法素数
网络上对求素数之解数不胜数,我在此总结归纳一下,同时对一些编码,加以改进,效率有成倍热提高。
第一种:
原理: 6N(+-)1法 任何一个自然数,总可以表示成为如下的形式之一: 6N,6N+1,6N+2,6N+3,6N+4,6N+5 (N=0,1,2,…)
- java 单例模式
g21121
java
想必单例模式大家都不会陌生,有如下两种方式来实现单例模式:
class Singleton {
private static Singleton instance=new Singleton();
private Singleton(){}
static Singleton getInstance() {
return instance;
}
- Linux下Mysql源码安装
510888780
mysql
1.假设已经有mysql-5.6.23-linux-glibc2.5-x86_64.tar.gz
(1)创建mysql的安装目录及数据库存放目录
解压缩下载的源码包,目录结构,特殊指定的目录除外:
- 32位和64位操作系统
墙头上一根草
32位和64位操作系统
32位和64位操作系统是指:CPU一次处理数据的能力是32位还是64位。现在市场上的CPU一般都是64位的,但是这些CPU并不是真正意义上的64 位CPU,里面依然保留了大部分32位的技术,只是进行了部分64位的改进。32位和64位的区别还涉及了内存的寻址方面,32位系统的最大寻址空间是2 的32次方= 4294967296(bit)= 4(GB)左右,而64位系统的最大寻址空间的寻址空间则达到了
- 我的spring学习笔记10-轻量级_Spring框架
aijuans
Spring 3
一、问题提问:
→ 请简单介绍一下什么是轻量级?
轻量级(Leightweight)是相对于一些重量级的容器来说的,比如Spring的核心是一个轻量级的容器,Spring的核心包在文件容量上只有不到1M大小,使用Spring核心包所需要的资源也是很少的,您甚至可以在小型设备中使用Spring。
 
- mongodb 环境搭建及简单CURD
antlove
WebInstallcurdNoSQLmongo
一 搭建mongodb环境
1. 在mongo官网下载mongodb
2. 在本地创建目录 "D:\Program Files\mongodb-win32-i386-2.6.4\data\db"
3. 运行mongodb服务 [mongod.exe --dbpath "D:\Program Files\mongodb-win32-i386-2.6.4\data\
- 数据字典和动态视图
百合不是茶
oracle数据字典动态视图系统和对象权限
数据字典(data dictionary)是 Oracle 数据库的一个重要组成部分,这是一组用于记录数据库信息的只读(read-only)表。随着数据库的启动而启动,数据库关闭时数据字典也关闭 数据字典中包含
数据库中所有方案对象(schema object)的定义(包括表,视图,索引,簇,同义词,序列,过程,函数,包,触发器等等)
数据库为一
- 多线程编程一般规则
bijian1013
javathread多线程java多线程
如果两个工两个以上的线程都修改一个对象,那么把执行修改的方法定义为被同步的,如果对象更新影响到只读方法,那么只读方法也要定义成同步的。
不要滥用同步。如果在一个对象内的不同的方法访问的不是同一个数据,就不要将方法设置为synchronized的。
- 将文件或目录拷贝到另一个Linux系统的命令scp
bijian1013
linuxunixscp
一.功能说明 scp就是security copy,用于将文件或者目录从一个Linux系统拷贝到另一个Linux系统下。scp传输数据用的是SSH协议,保证了数据传输的安全,其格式如下: scp 远程用户名@IP地址:文件的绝对路径
- 【持久化框架MyBatis3五】MyBatis3一对多关联查询
bit1129
Mybatis3
以教员和课程为例介绍一对多关联关系,在这里认为一个教员可以叫多门课程,而一门课程只有1个教员教,这种关系在实际中不太常见,通过教员和课程是多对多的关系。
示例数据:
地址表:
CREATE TABLE ADDRESSES
(
ADDR_ID INT(11) NOT NULL AUTO_INCREMENT,
STREET VAR
- cookie状态判断引发的查找问题
bitcarter
formcgi
先说一下我们的业务背景:
1.前台将图片和文本通过form表单提交到后台,图片我们都做了base64的编码,并且前台图片进行了压缩
2.form中action是一个cgi服务
3.后台cgi服务同时供PC,H5,APP
4.后台cgi中调用公共的cookie状态判断方法(公共的,大家都用,几年了没有问题)
问题:(折腾两天。。。。)
1.PC端cgi服务正常调用,cookie判断没
- 通过Nginx,Tomcat访问日志(access log)记录请求耗时
ronin47
一、Nginx通过$upstream_response_time $request_time统计请求和后台服务响应时间
nginx.conf使用配置方式:
log_format main '$remote_addr - $remote_user [$time_local] "$request" ''$status $body_bytes_sent "$http_r
- java-67- n个骰子的点数。 把n个骰子扔在地上,所有骰子朝上一面的点数之和为S。输入n,打印出S的所有可能的值出现的概率。
bylijinnan
java
public class ProbabilityOfDice {
/**
* Q67 n个骰子的点数
* 把n个骰子扔在地上,所有骰子朝上一面的点数之和为S。输入n,打印出S的所有可能的值出现的概率。
* 在以下求解过程中,我们把骰子看作是有序的。
* 例如当n=2时,我们认为(1,2)和(2,1)是两种不同的情况
*/
private stati
- 看别人的博客,觉得心情很好
Cb123456
博客心情
以为写博客,就是总结,就和日记一样吧,同时也在督促自己。今天看了好长时间博客:
职业规划:
http://www.iteye.com/blogs/subjects/zhiyeguihua
android学习:
1.http://byandby.i
- [JWFD开源工作流]尝试用原生代码引擎实现循环反馈拓扑分析
comsci
工作流
我们已经不满足于仅仅跳跃一次,通过对引擎的升级,今天我测试了一下循环反馈模式,大概跑了200圈,引擎报一个溢出错误
在一个流程图的结束节点中嵌入一段方程,每次引擎运行到这个节点的时候,通过实时编译器GM模块,计算这个方程,计算结果与预设值进行比较,符合条件则跳跃到开始节点,继续新一轮拓扑分析,直到遇到
- JS常用的事件及方法
cwqcwqmax9
js
事件 描述
onactivate 当对象设置为活动元素时触发。
onafterupdate 当成功更新数据源对象中的关联对象后在数据绑定对象上触发。
onbeforeactivate 对象要被设置为当前元素前立即触发。
onbeforecut 当选中区从文档中删除之前在源对象触发。
onbeforedeactivate 在 activeElement 从当前对象变为父文档其它对象之前立即
- 正则表达式验证日期格式
dashuaifu
正则表达式IT其它java其它
正则表达式验证日期格式
function isDate(d){
var v = d.match(/^(\d{4})-(\d{1,2})-(\d{1,2})$/i);
if(!v) {
this.focus();
return false;
}
}
<input value="2000-8-8" onblu
- Yii CModel.rules() 方法 、validate预定义完整列表、以及说说验证
dcj3sjt126com
yii
public array rules () {return} array 要调用 validate() 时应用的有效性规则。 返回属性的有效性规则。声明验证规则,应重写此方法。 每个规则是数组具有以下结构:array('attribute list', 'validator name', 'on'=>'scenario name', ...validation
- UITextAttributeTextColor = deprecated in iOS 7.0
dcj3sjt126com
ios
In this lesson we used the key "UITextAttributeTextColor" to change the color of the UINavigationBar appearance to white. This prompts a warning "first deprecated in iOS 7.0."
Ins
- 判断一个数是质数的几种方法
EmmaZhao
Mathpython
质数也叫素数,是只能被1和它本身整除的正整数,最小的质数是2,目前发现的最大的质数是p=2^57885161-1【注1】。
判断一个数是质数的最简单的方法如下:
def isPrime1(n):
for i in range(2, n):
if n % i == 0:
return False
return True
但是在上面的方法中有一些冗余的计算,所以
- SpringSecurity工作原理小解读
坏我一锅粥
SpringSecurity
SecurityContextPersistenceFilter
ConcurrentSessionFilter
WebAsyncManagerIntegrationFilter
HeaderWriterFilter
CsrfFilter
LogoutFilter
Use
- JS实现自适应宽度的Tag切换
ini
JavaScripthtmlWebcsshtml5
效果体验:http://hovertree.com/texiao/js/3.htm
该效果使用纯JavaScript代码,实现TAB页切换效果,TAB标签根据内容自适应宽度,点击TAB标签切换内容页。
HTML文件代码:
<!DOCTYPE html>
<html xmlns="http://www.w3.org/1999/xhtml"
- Hbase Rest API : 数据查询
kane_xie
RESThbase
hbase(hadoop)是用java编写的,有些语言(例如python)能够对它提供良好的支持,但也有很多语言使用起来并不是那么方便,比如c#只能通过thrift访问。Rest就能很好的解决这个问题。Hbase的org.apache.hadoop.hbase.rest包提供了rest接口,它内嵌了jetty作为servlet容器。
启动命令:./bin/hbase rest s
- JQuery实现鼠标拖动元素移动位置(源码+注释)
明子健
jqueryjs源码拖动鼠标
欢迎讨论指正!
print.html代码:
<!DOCTYPE html>
<html>
<head>
<meta http-equiv=Content-Type content="text/html;charset=utf-8">
<title>发票打印</title>
&l
- Postgresql 连表更新字段语法 update
qifeifei
PostgreSQL
下面这段sql本来目的是想更新条件下的数据,可是这段sql却更新了整个表的数据。sql如下:
UPDATE tops_visa.visa_order
SET op_audit_abort_pass_date = now()
FROM
tops_visa.visa_order as t1
INNER JOIN tops_visa.visa_visitor as t2
ON t1.
- 将redis,memcache结合使用的方案?
tcrct
rediscache
公司架构上使用了阿里云的服务,由于阿里的kvstore收费相当高,打算自建,自建后就需要自己维护,所以就有了一个想法,针对kvstore(redis)及ocs(memcache)的特点,想自己开发一个cache层,将需要用到list,set,map等redis方法的继续使用redis来完成,将整条记录放在memcache下,即findbyid,save等时就memcache,其它就对应使用redi
- 开发中遇到的诡异的bug
wudixiaotie
bug
今天我们服务器组遇到个问题:
我们的服务是从Kafka里面取出数据,然后把offset存储到ssdb中,每个topic和partition都对应ssdb中不同的key,服务启动之后,每次kafka数据更新我们这边收到消息,然后存储之后就发现ssdb的值偶尔是-2,这就奇怪了,最开始我们是在代码中打印存储的日志,发现没什么问题,后来去查看ssdb的日志,才发现里面每次set的时候都会对同一个key