python批量写入数据库_python实现数据库批量数据插入.
需求：
1.需要往数据库插入批量数据，且数据需要随机，带有日期格式的数据。
2.查看目的接收表，存在唯一key，字段2是日期格式。其他数据可以一样。
首先需要写一个链接数据库的函数：import MySQLdb
class MySql():
def __init__(self, db):
self.mysql = MySQLdb.Connect(
host="10.100.111.111",
port=33066,
user="mysql",
passwd="123456",
db=db,
charset="utf8")
self.cursor = self.mysql.cursor()
def quary(self, sql):
"""
查询
:param sql:
:return:
"""
self.cursor.execute(sql)
result = self.cursor.fetchall()
return result
def update(self, sql):
"""
修改
:param sql:
:return:
"""
self.cursor.execute(sql)
self.mysql.commit()
def delete(self, sql):
"""
删除
:param sql:
:return:
"""
self.cursor.execute(sql)
self.mysql.commit()
def insert(self, sql):
"""
插入
:param sql:
:return:
"""
self.cursor.execute(sql)
self.mysql.commit()
return "success"
def close(self):
self.mysql.close()
然后利用python循环写一个日期格式转化的函数：
class DateEncoder(json.JSONEncoder):
def default(self, obj):
if isinstance(obj, datetime):
return obj.strftime("%Y-%m-%d %H:%M:%S")
else:
return json.JSONEncoder.default(self, obj)
def test1(self):
"""
id为唯一key，不能相同，需要查询到count总数得到id 时间是当前时间+1天生成sql语句
"""
ids = 174
cur_date = time.strftime("%Y-%m-%d")
start_time = datetime.strptime(cur_date, "%Y-%m-%d")
for i in range(50):
ids = ids + 1
dt = start_time + timedelta(days=i)
to_date = json.dumps(dt, cls=DateEncoder) # 将datetime格式转化为json格式
to_date = to_date[1:11] # 取string中的年月日
value = (
ids, to_date, '0104', '10', '1609725600', 64, '产品测试', 1100018191, 'mytest',
'5ff674f5e4b0fd510e457fd2', '1.7号啊',
0, '01', '06', '01', '0', '菜单2', '908E14881C52DF30A50C93491AE2BA8C', '1', '123', 10001, 9999, 912)
sql = """INSERT INTO ads_marketing_report.test_table(id, dt, fdate, ftime, servertime, agency_id, agency_name, owner_id, owner_name, service_id, service_name, service_platform, sbiztype, tritype, menulev, menuseq, btnele, btnlinkmd, functype, smssource, expose_nums, expose_uv, click_nums)
VALUES""" + str(value).decode('string_escape')
mysql.insert(sql=sql)
插入多少条 循环多少次就行，或者研究下存储过程插入也行的