- python 写入mysql
C11611
technologypython
开发环境及工具:macjupyter-notebookimporttushareastsimportmatplotlib.pyplotaspltimportpandasaspdimportpymysql.cursorsimporttimeimportpymysqlimportnumpyasnpdefgetstockdata(stockid,starttime,endtime):df=ts.get_
- docker pull msyql5.6 并使用
开花沼泽.
dockeradb容器
dockerpullmsyql:5.6mkdir-p/root/mysql/mysqlconfvim/root/mysql/mysqlconf/my.cnf[mysqld]skip-host-cacheskip-name-resolvedatadir=/var/lib/mysqlinit_connect='SETcollation_connection=utf8_general_ci'init_c
- php 使用 LOAD DATA LOCAL INFILE方法插入测试数据
fanchengliang
参考网上LOADDATALOCALINFILE的使用方法,做了一个demo,记录下主要使用过程需求:往数据库表插入大量的测试数据主要步骤:1.生成一个需要的数据txt文件,这个文件大概长这样image.png(这里数据格式和样式在后面可根据自己需求修改)2.将这个文件使用LOADDATALOCALINFILE命令导入数据主要代码1.数据库连接//有一种mysqli的set_local_infile
- php操作mysql防止sql注入(合集)
get200
mysqlmysql注入
本文将从sql注入风险说起,并且比较addslashes、mysql_escape_string、mysql_real_escape_string、mysqli和pdo的预处理的区别。当一个变量从表单传入到php,需要查询mysql的话,需要进行处理。举例:$unsafe_variable=$_POST[‘user_input’];mysqli_query(“INSERTINTOtable(col
- python sql语句生成_python自动生成sql语句的脚本
weixin_39531183
pythonsql语句生成
描述:工作中在数据库中创建表时,当字段很多时,比较麻烦,开发一个工具,可在excel中写好字段英文名和中文名,然后通过py生成脚本或直接在库中生成表脚本:importtkinterfromtkinterimport*importtkinter.messageboxfromtkinterimportscrolledtextimportxlrdimportpymysqlimportos#从excel中
- MySql插入语句时报错,错误代码1062
SheldonChang
数据库mysqlsqlmybatis数据库
MySql插入语句时报错,错误代码1062mysql工具操作报错程序运行报错Cause:com.mysql.jdbc.exceptions.jdbc4.MySQLIntegrityConstraintViolationException:Duplicateentry‘123456’forkey‘order_number’;Duplicateentry‘123456’forkey‘order_num
- mysql 批处理速度_mysql批处理性能优化
martingalesquare
mysql批处理速度
参考了:http://blog.csdn.net/tolcf/article/details/52102849后来根据自己情况测试一次,结果如下。1、mysqlinsert####第一种测试情况batchSize=5000;connection.setAutoCommit(false);prepStatement.addBatch();##----测试结果如下----2016-09-1014:53
- 【Python奇遇记】Pymysql连接MySQL报TypeError
Robot_B
mysql数据库
Python连接mysql报TypeError问题:Python连接mysql时报TypeError:objectsupportingthebufferAPIrequired#数据库配置文件config_mysql.yamlhost:192.168.1.1port:3306user:test001passwd:123456db:test_dbcharset:utf8importpymysqlimp
- query()方法
左手码农
PHPMySQLsqlPHPquery
执行SQL命令,无论如何通过PHP脚本与Mysql数据库交互,过程都是一样的,创建一个SQL语句,再传递给执行查询的函数。在mysqli类中提供了几种执行SQL命令的方法,其中最常用的是query()方法。对于insert、update、delete等不会返回数据的SQL命令,query()方法在SQL命令成功执行时返回true。在此基础上还可以通过mysqli对象中的affected_rows属
- swift SQLite自封装
liu_yun_long
swiftsqlite
1.数据库封装类MySQLiteManagerimportFoundationimportSQLite3//数据库封装类classMySQLiteManager{privatevardb:OpaquePointer!//重写构造函数init(dbPath:String){letisSuccess=openDB(dbPath:dbPath)ifisSuccess{print("打开数据库成功")}e
- data_merge数据库合并
Haaaaaang
数据库sqlpython
importpymysqlimporttimeif__name__=='__main__':scs_db=pymysql.connect(host='XXXXXXXXXX',port=XXXXXXXXXX,user='XXXXXXXXXX',password='XXXXXXXXXX',db='XXXXXXXXXX',charset='utf8mb4')select_sql="""selectid+
- 第26期:索引设计(索引下推)
爱可生开源社区
image索引下推(INDEXCONDITIONPUSHDOWN,简称ICP)是MySQL5.6发布后针对扫描二级索引的一项优化改进。总的来说是通过把索引过滤条件下推到存储引擎,来减少MySQL存储引擎访问基表的次数以及MySQL服务层访问存储引擎的次数。ICP适用于MYISAM和INNODB,本篇的内容只基于INNODB。MySQLICP里涉及到的知识点如下:1.MySQL服务层:也就是SERV
- mysql双写原理_为什么别人能用好 MySQL?万字详解其复杂原理
邵老师说
mysql双写原理
原标题:为什么别人能用好MySQL?万字详解其复杂原理来源:简书-七把刀https://www.jianshu.com/p/d4cc0ea9d097MySQLInnoDB引擎现在广为使用,它提供了事务,行锁,日志等一系列特性,本文分析下InnoDB的内部实现机制,MySQL版本为5.7.24,操作系统为Debian9。MySQLInnoDB的实现非常复杂,本文只是总结了一些皮毛,希望以后能够研究的
- 三分钟教会你如何安装mysql
啦啦啦小脑瓜
MySQL安装与卸载mysql数据库
新手小白就选图形化,傻瓜式安装一、下载1.浏览器搜索mysql官网2.进入后点击下载3.下载页面往下翻找到MySQLCommunity(GPL)Downloads»4.进入后点击MySQLInstallerforWindows5.这时候我们会看到MySQL的最新版本是8.0.36,第一个是边下载边安装,在这里我们直接点击第二个下载就好。6.如果想要选择其他版本,我们可以点击上方的Archives,
- 【网络安全】红队渗透项目之Stapler1(下)
H_00c8
声明:本文仅用于技术讨论与研究,对于所有笔记中复现的这些终端或者服务器,都是自行搭建的环境进行渗透的。我将使用KaliLinux作为此次学习的攻击者机器。这里使用的技术仅用于学习教育目的,如果列出的技术用于其他任何目标,本站及作者概不负责。建议阅读上一篇后再来阅读本文!!!六、Mysql攻陷服务器1、mysqlINTOOUT文件上传MySQL中你可以使用SELECT...INTOOUTFILE语句
- MySQL数据库下载及安装教程
Y T
mysql
MySQL数据库是一款流行的开源关系型数据库管理系统,广泛应用于各种Web应用和企业级应用中。以下是MySQL数据库的下载及安装教程,包括Windows和Linux系统的基本步骤。Windows系统安装MySQL下载MySQL:访问MySQL官方网站的下载页面:MySQLCommunityDownloads选择适合你的Windows版本的MySQLInstaller,通常推荐下载“Windows(
- shell 监控mysql\nginx脚本
SkTj
1、mysql!/bin/shport=netstat-lnt|grep3306|wc-lif[$port-ne1];thenecho"mysqlisstop"/etc/init.d/mysqldstartelseecho"mysqlisstarting"fi2、监控Nginx!/bin/shport=netstat-lnt|grep80|wc-lif[$port-ne1];thenecho"ng
- MYSQL专题-MVCC多版本并发控制
程序届的伪精英
java理论与实践mysqlmvcc数据库
MVCC,全称Multi-VersionConcurrencyControl,即多版本并发控制。MVCC是一种并发控制的方法,一般在数据库管理系统中,实现对数据库的并发访问,在编程语言中实现事务内存。MVCC在MySQLInnoDB中的实现主要是为了提高数据库并发性能,用更好的方式去处理读-写冲突,做到即使有读写冲突时,也能做到不加锁,非阻塞并发读。基础概述数据库并发场景大致分为三种:读-读:不存
- PHP安装后错误处理
php
一:问题安装PHP后提示错误如下二:解决1:Warning:Module'mysqli'alreadyloadedinUnknownonline0解决原因:通过php.ini配置文件开启mysqli扩展的时候,开启了多次解决:将php.ini配置文件中多个extension=mysqli只保留一个。2:Deprecated:Directive'track_errors'isdeprecatedin
- 爬虫代码中的mysql使用
吕正日
mysql数据库爬虫
defget_data(item):mysqlinfo={"goods_name":"","goods_id":"","url":"","sales":"","normal_price":"","market_price":"","price_info":"","imgone":"","imgtwo":"","imgthree":"","tag_list":"","mall_name":"","m
- 【代码审计-3】PHP项目RCE及文件包含下载删除
阿福超级胖
小迪安全笔记php数据库mysql
漏洞关键字SQL注入:selectinsertupdatemysql_querymysqli等文件上传:$_FILES,type="file",上传,move_upload_file()等XSS跨站:printprint_rechosprintfdievar_dumpvar_export等文件包含:Includeinclude_oncerequirerequire_once等代码执行:evalas
- 面试官:小伙子,给我说一下mysql 乐观锁和悲观锁吧
前程有光
悲观锁介绍悲观锁,正如其名,它指的是对数据被外界(包括本系统当前的其他事务,以及来自外部系统的事务处理)修改持保守态度,因此,在整个数据处理过程中,将数据处于锁定状态。悲观锁的实现,往往依靠数据库提供的锁机制(也只有数据库层提供的锁机制才能真正保证数据访问的排他性,否则,即使在本系统中实现了加锁机制,也无法保证外部系统不会修改数据)。使用场景举例:以MySQLInnoDB为例商品goods表中有一
- PHP安装后错误处理
huaweichenai
php开发语言
一:问题安装PHP后提示错误如下二:解决1:Warning:Module'mysqli'alreadyloadedinUnknownonline0解决原因:通过php.ini配置文件开启mysqli扩展的时候,开启了多次解决:将php.ini配置文件中多个extension=mysqli只保留一个。2:Deprecated:Directive'track_errors'isdeprecatedin
- mysql的安装
别问我,我什么都不知道
mysql数据库
①官网下载mysql链接:MySQL::DownloadMySQLInstaller②选项配置点击next,再点击excute:继续点击next,直到配置页:自己配置一个密码:这页不用修改,直接点击next:点击next:点击excute:没有红叉,点击finish就完成安装了(这里注意路径和电脑用户名不能出现中文,否则可能会卡在startingtheserve):③注意事项如果你的路径或者用户名
- 并发下的库存如何扣?
码哥说
并发下的库存如何扣?背景业务反馈,项目出现库存超卖/负值现象。原因//简易demo$conn=mysqli_connect('localhost','root','123456','shop')ordie('数据库连接失败');$conn->query("SETNAMES'UTF8'");$query="SELECTnumFROMstockwhereid=1";$rs=$conn->query($
- MySQL完全备份脚本(基于python和shell)及MYSQL 密码修改重置修改密码等级
云计算小曹同学
mysql
MySQL完全备份脚本(注意:MySQL8.0以前的要用--master-data=2)一、基于windows的nsyql逐表备份(语言:python)fromurllib.requestimporturlopenimportreimporttimeimportdatetimeimportrandomimportlinecacheimportopenpyxlimportpymysqlimportr
- jumpserver启动时遇到的问题及解决方法
GUlGA
centosdocker
ERROR:forjms_kokoCannotstartservicekoko:driverfailedprogramming报错信息jms_mysqlisup-to-datejms_redisisup-to-dateCreatingjms_core...doneCreatingjms_guacamole...Creatingjms_celery...Creatingjms_koko...Crea
- python连接数据库
陈芝麻烂谷子的事
1.使用pymysql可以进行数据库的相关操作安装:pip3installPyMySQLimportpymysql#导入pyMySQL包db=pymysql.connect("host","username","password","databasename",charset="utf8")#连接数据库cursor=db.cursor()#创建一个游标数据库连接对象查询语句:select_sql=
- 你对MySQL的int(11)真的了解吗?
修己xj
mysqlmysql数据库
最近在网上看到一篇关于int(3)和int(11)区别的帖子,我第一反应这不就是它们之间主要涉及存储整型数据时所需的位数,即3位和11位的差异。然而,经过详细阅读文章并进行进一步的资料查询和测试后,我才发现我一直以来对于int(3)的理解存在误差。今天,我打算与家人分享这一新的认识。MYSQLint数据存储范围首先,需要明确的是,int(3)和int(11)都是表示整数类型,而不是定义整数的存储长
- 从PDO下的SQL注入思路到获得GIT 3000star项目0day
J0o1ey
网络安全代码审计sqlgitweb安全
0x01PDO简介PDO全名PHPDataObjectPDO扩展为PHP访问数据库定义了一个轻量级的一致接口。PDO提供了一个数据访问抽象层,这意味着,不管使用哪种数据库,都可以使用相同的函数(方法)来查询和获取数据。PHP连接MySQL数据库有三种方式(MySQL、Mysqli、PDO),列表性比较如下:MysqliPDOMySQL引入的PHP版本5.05.03.0之前PHP5.x是否包含是是是
- LeetCode[位运算] - #137 Single Number II
Cwind
javaAlgorithmLeetCode题解位运算
原题链接:#137 Single Number II
要求:
给定一个整型数组,其中除了一个元素之外,每个元素都出现三次。找出这个元素
注意:算法的时间复杂度应为O(n),最好不使用额外的内存空间
难度:中等
分析:
与#136类似,都是考察位运算。不过出现两次的可以使用异或运算的特性 n XOR n = 0, n XOR 0 = n,即某一
- 《JavaScript语言精粹》笔记
aijuans
JavaScript
0、JavaScript的简单数据类型包括数字、字符创、布尔值(true/false)、null和undefined值,其它值都是对象。
1、JavaScript只有一个数字类型,它在内部被表示为64位的浮点数。没有分离出整数,所以1和1.0的值相同。
2、NaN是一个数值,表示一个不能产生正常结果的运算结果。NaN不等于任何值,包括它本身。可以用函数isNaN(number)检测NaN,但是
- 你应该更新的Java知识之常用程序库
Kai_Ge
java
在很多人眼中,Java 已经是一门垂垂老矣的语言,但并不妨碍 Java 世界依然在前进。如果你曾离开 Java,云游于其它世界,或是每日只在遗留代码中挣扎,或许是时候抬起头,看看老 Java 中的新东西。
Guava
Guava[gwɑ:və],一句话,只要你做Java项目,就应该用Guava(Github)。
guava 是 Google 出品的一套 Java 核心库,在我看来,它甚至应该
- HttpClient
120153216
httpclient
/**
* 可以传对象的请求转发,对象已流形式放入HTTP中
*/
public static Object doPost(Map<String,Object> parmMap,String url)
{
Object object = null;
HttpClient hc = new HttpClient();
String fullURL
- Django model字段类型清单
2002wmj
django
Django 通过 models 实现数据库的创建、修改、删除等操作,本文为模型中一般常用的类型的清单,便于查询和使用: AutoField:一个自动递增的整型字段,添加记录时它会自动增长。你通常不需要直接使用这个字段;如果你不指定主键的话,系统会自动添加一个主键字段到你的model。(参阅自动主键字段) BooleanField:布尔字段,管理工具里会自动将其描述为checkbox。 Cha
- 在SQLSERVER中查找消耗CPU最多的SQL
357029540
SQL Server
返回消耗CPU数目最多的10条语句
SELECT TOP 10
total_worker_time/execution_count AS avg_cpu_cost, plan_handle,
execution_count,
(SELECT SUBSTRING(text, statement_start_of
- Myeclipse项目无法部署,Undefined exploded archive location
7454103
eclipseMyEclipse
做个备忘!
错误信息为:
Undefined exploded archive location
原因:
在工程转移过程中,导致工程的配置文件出错;
解决方法:
 
- GMT时间格式转换
adminjun
GMT时间转换
普通的时间转换问题我这里就不再罗嗦了,我想大家应该都会那种低级的转换问题吧,现在我向大家总结一下如何转换GMT时间格式,这种格式的转换方法网上还不是很多,所以有必要总结一下,也算给有需要的朋友一个小小的帮助啦。
1、可以使用
SimpleDateFormat SimpleDateFormat
EEE-三位星期
d-天
MMM-月
yyyy-四位年
- Oracle数据库新装连接串问题
aijuans
oracle数据库
割接新装了数据库,客户端登陆无问题,apache/cgi-bin程序有问题,sqlnet.log日志如下:
Fatal NI connect error 12170.
VERSION INFORMATION: TNS for Linux: Version 10.2.0.4.0 - Product
- 回顾java数组复制
ayaoxinchao
java数组
在写这篇文章之前,也看了一些别人写的,基本上都是大同小异。文章是对java数组复制基础知识的回顾,算是作为学习笔记,供以后自己翻阅。首先,简单想一下这个问题:为什么要复制数组?我的个人理解:在我们在利用一个数组时,在每一次使用,我们都希望它的值是初始值。这时我们就要对数组进行复制,以达到原始数组值的安全性。java数组复制大致分为3种方式:①for循环方式 ②clone方式 ③arrayCopy方
- java web会话监听并使用spring注入
bewithme
Java Web
在java web应用中,当你想在建立会话或移除会话时,让系统做某些事情,比如说,统计在线用户,每当有用户登录时,或退出时,那么可以用下面这个监听器来监听。
import java.util.ArrayList;
import java.ut
- NoSQL数据库之Redis数据库管理(Redis的常用命令及高级应用)
bijian1013
redis数据库NoSQL
一 .Redis常用命令
Redis提供了丰富的命令对数据库和各种数据库类型进行操作,这些命令可以在Linux终端使用。
a.键值相关命令
b.服务器相关命令
1.键值相关命令
&
- java枚举序列化问题
bingyingao
java枚举序列化
对象在网络中传输离不开序列化和反序列化。而如果序列化的对象中有枚举值就要特别注意一些发布兼容问题:
1.加一个枚举值
新机器代码读分布式缓存中老对象,没有问题,不会抛异常。
老机器代码读分布式缓存中新对像,反序列化会中断,所以在所有机器发布完成之前要避免出现新对象,或者提前让老机器拥有新增枚举的jar。
2.删一个枚举值
新机器代码读分布式缓存中老对象,反序列
- 【Spark七十八】Spark Kyro序列化
bit1129
spark
当使用SparkContext的saveAsObjectFile方法将对象序列化到文件,以及通过objectFile方法将对象从文件反序列出来的时候,Spark默认使用Java的序列化以及反序列化机制,通常情况下,这种序列化机制是很低效的,Spark支持使用Kyro作为对象的序列化和反序列化机制,序列化的速度比java更快,但是使用Kyro时要注意,Kyro目前还是有些bug。
Spark
- Hybridizing OO and Functional Design
bookjovi
erlanghaskell
推荐博文:
Tell Above, and Ask Below - Hybridizing OO and Functional Design
文章中把OO和FP讲的深入透彻,里面把smalltalk和haskell作为典型的两种编程范式代表语言,此点本人极为同意,smalltalk可以说是最能体现OO设计的面向对象语言,smalltalk的作者Alan kay也是OO的最早先驱,
- Java-Collections Framework学习与总结-HashMap
BrokenDreams
Collections
开发中常常会用到这样一种数据结构,根据一个关键字,找到所需的信息。这个过程有点像查字典,拿到一个key,去字典表中查找对应的value。Java1.0版本提供了这样的类java.util.Dictionary(抽象类),基本上支持字典表的操作。后来引入了Map接口,更好的描述的这种数据结构。
&nb
- 读《研磨设计模式》-代码笔记-职责链模式-Chain Of Responsibility
bylijinnan
java设计模式
声明: 本文只为方便我个人查阅和理解,详细的分析以及源代码请移步 原作者的博客http://chjavach.iteye.com/
/**
* 业务逻辑:项目经理只能处理500以下的费用申请,部门经理是1000,总经理不设限。简单起见,只同意“Tom”的申请
* bylijinnan
*/
abstract class Handler {
/*
- Android中启动外部程序
cherishLC
android
1、启动外部程序
引用自:
http://blog.csdn.net/linxcool/article/details/7692374
//方法一
Intent intent=new Intent();
//包名 包名+类名(全路径)
intent.setClassName("com.linxcool", "com.linxcool.PlaneActi
- summary_keep_rate
coollyj
SUM
BEGIN
/*DECLARE minDate varchar(20) ;
DECLARE maxDate varchar(20) ;*/
DECLARE stkDate varchar(20) ;
DECLARE done int default -1;
/* 游标中 注册服务器地址 */
DE
- hadoop hdfs 添加数据目录出错
daizj
hadoophdfs扩容
由于原来配置的hadoop data目录快要用满了,故准备修改配置文件增加数据目录,以便扩容,但由于疏忽,把core-site.xml, hdfs-site.xml配置文件dfs.datanode.data.dir 配置项增加了配置目录,但未创建实际目录,重启datanode服务时,报如下错误:
2014-11-18 08:51:39,128 WARN org.apache.hadoop.h
- grep 目录级联查找
dongwei_6688
grep
在Mac或者Linux下使用grep进行文件内容查找时,如果给定的目标搜索路径是当前目录,那么它默认只搜索当前目录下的文件,而不会搜索其下面子目录中的文件内容,如果想级联搜索下级目录,需要使用一个“-r”参数:
grep -n -r "GET" .
上面的命令将会找出当前目录“.”及当前目录中所有下级目录
- yii 修改模块使用的布局文件
dcj3sjt126com
yiilayouts
方法一:yii模块默认使用系统当前的主题布局文件,如果在主配置文件中配置了主题比如: 'theme'=>'mythm', 那么yii的模块就使用 protected/themes/mythm/views/layouts 下的布局文件; 如果未配置主题,那么 yii的模块就使用 protected/views/layouts 下的布局文件, 总之默认不是使用自身目录 pr
- 设计模式之单例模式
come_for_dream
设计模式单例模式懒汉式饿汉式双重检验锁失败无序写入
今天该来的面试还没来,这个店估计不会来电话了,安静下来写写博客也不错,没事翻了翻小易哥的博客甚至与大牛们之间的差距,基础知识不扎实建起来的楼再高也只能是危楼罢了,陈下心回归基础把以前学过的东西总结一下。
*********************************
- 8、数组
豆豆咖啡
二维数组数组一维数组
一、概念
数组是同一种类型数据的集合。其实数组就是一个容器。
二、好处
可以自动给数组中的元素从0开始编号,方便操作这些元素
三、格式
//一维数组
1,元素类型[] 变量名 = new 元素类型[元素的个数]
int[] arr =
- Decode Ways
hcx2013
decode
A message containing letters from A-Z is being encoded to numbers using the following mapping:
'A' -> 1
'B' -> 2
...
'Z' -> 26
Given an encoded message containing digits, det
- Spring4.1新特性——异步调度和事件机制的异常处理
jinnianshilongnian
spring 4.1
目录
Spring4.1新特性——综述
Spring4.1新特性——Spring核心部分及其他
Spring4.1新特性——Spring缓存框架增强
Spring4.1新特性——异步调用和事件机制的异常处理
Spring4.1新特性——数据库集成测试脚本初始化
Spring4.1新特性——Spring MVC增强
Spring4.1新特性——页面自动化测试框架Spring MVC T
- squid3(高命中率)缓存服务器配置
liyonghui160com
系统:centos 5.x
需要的软件:squid-3.0.STABLE25.tar.gz
1.下载squid
wget http://www.squid-cache.org/Versions/v3/3.0/squid-3.0.STABLE25.tar.gz
tar zxf squid-3.0.STABLE25.tar.gz &&
- 避免Java应用中NullPointerException的技巧和最佳实践
pda158
java
1) 从已知的String对象中调用equals()和equalsIgnoreCase()方法,而非未知对象。 总是从已知的非空String对象中调用equals()方法。因为equals()方法是对称的,调用a.equals(b)和调用b.equals(a)是完全相同的,这也是为什么程序员对于对象a和b这么不上心。如果调用者是空指针,这种调用可能导致一个空指针异常
Object unk
- 如何在Swift语言中创建http请求
shoothao
httpswift
概述:本文通过实例从同步和异步两种方式上回答了”如何在Swift语言中创建http请求“的问题。
如果你对Objective-C比较了解的话,对于如何创建http请求你一定驾轻就熟了,而新语言Swift与其相比只有语法上的区别。但是,对才接触到这个崭新平台的初学者来说,他们仍然想知道“如何在Swift语言中创建http请求?”。
在这里,我将作出一些建议来回答上述问题。常见的
- Spring事务的传播方式
uule
spring事务
传播方式:
新建事务
required
required_new - 挂起当前
非事务方式运行
supports
&nbs