python下如何往数据库批量插入数据?方法是什么?
Admin 2021-10-21 群英技术资讯 524 次浏览
python下如何往数据库批量插入数据?方法是什么?假如我们想要往数据库表中的插入的数据有几百上千条,那么一条条插入,则调用sql语句查询插入就需要执行几百上千,这样花费的时间就非常的长。因此我们可以使用cursor.executemany(sql,args)来实现批量插入数据,那么具体怎样做呢?接着往下看。
现使用cursor.executemany(sql,args) ,可对数据进行批量插入,其中args是一个包含多个元组的list列表,每个元组对应mysql当中的一条数据
以下是实例:
往数据库中的order表、order_detail表和pay表中插入1000条订单数据,订单详情数据以及支付数据
1.pay表中的id字段是order表中的pay_id字段
2.order表中的id字段是order_detail表中的order_id字段
1.初始化属性(包括host、port、user、password和database)
def __init__(self): self.__db_host=XXX self.__db_port=XXX self.__db_user=XXX self.__db_password=XXX self.__db_database=XXX
2.连接数据库
def isConnection(self): self.__db=pymysql.connect( host=self.__db_host, port=self.__db_port, user=self.__db_user, password=self.__db_password, database=self.__db_database, charset='utf8' )
3.批量往pay表中插入1000条数据
# 插入数据进pay表 def pay_insert(self,pay_value): try: # 连接数据库 self.isConnection() # 创建游标 global cursor cursor=self.__db.cursor() # 执行 cursor.executemany('insert into `pay表`(type,pay_money,pay_time,pay_no,STATUS,create_by,create_time,update_by,
update_time) value (%s,%s,%s,%s,%s,%s,%s,%s,%s)',pay_value) except Exception as e: print e finally: cursor.close() self.__db.commit() self.__db.close() # 生成pay表所需字段,并调用sql def pay_data(self): pay_value=list() for i in range(1,1000): pay_value.append((0,8800,time.localtime(),str(random.randint(712300000000,712399999999)),3,49338,
time.localtime(),49338,time.localtime())) now_time=time.localtime() self.pay_insert(pay_value) return now_time
4.pay表中生成的1000条数据,依次取出id
# 获取pay_id def get_pay_id(self,now_time): try: self.isConnection() global cursor cursor=self.__db.cursor() cursor.execute('select id from `pay表` where create_time >= %s',now_time) id_value=list() for i in range(1,1000): pay_id=cursor.fetchone() id_value.append(pay_id) return id_value except Exception as e: print e finally: cursor.close() self.__db.commit() self.__db.close()
以下是完整代码:
# #!/usr/bin/python # # -*- coding: UTF-8 -*- import pymysql # 先pip install pymysql import random import time class DatabaseAcess: # 初始化属性(包括host、port、user、password和database) def __init__(self): self.__db_host=XXX self.__db_port=XXX self.__db_user=XXX self.__db_password=XXX self.__db_database=XXX # 连接数据库 def isConnection(self): self.__db=pymysql.connect( host=self.__db_host, port=self.__db_port, user=self.__db_user, password=self.__db_password, database=self.__db_database, charset='utf8' ) # 插入数据进pay表 def pay_insert(self,pay_value): try: # 连接数据库 self.isConnection() # 创建游标 global cursor cursor=self.__db.cursor() # 执行 cursor.executemany('insert into `pay表`(type,pay_money,pay_time,pay_no,STATUS,create_by,create_time,
update_by,update_time) value (%s,%s,%s,%s,%s,%s,%s,%s,%s)',pay_value) except Exception as e: print e finally: cursor.close() self.__db.commit() self.__db.close() # 生成pay表所需字段,并调用sql def pay_data(self,data_number): pay_value=list() for i in range(1,data_number): pay_value.append((0,8800,time.localtime(),str(random.randint(712300000000,712399999999)),3,49338,
time.localtime(),49338,time.localtime())) now_time=time.localtime() self.pay_insert(pay_value) return now_time # 获取pay_id def get_pay_id(self,now_time,data_number): try: self.isConnection() global cursor cursor=self.__db.cursor() cursor.execute('select id from `pay表` where create_time >= %s',now_time) id_value=list() for i in range(1,data_number): pay_id=cursor.fetchone() id_value.append(pay_id) return id_value except Exception as e: print e finally: cursor.close() self.__db.commit() self.__db.close() # 插入数据进order表 def order_insert(self,order_value): try: self.isConnection() global cursor cursor=self.__db.cursor() cursor.executemany('insert into `order表` (student_name,student_id,school_id,school_name,tel,height,
sex,pay_id,order_no,status,original_price,payment_price,order_type,create_by,create_time,update_by,
update_time,purchase_id,dept_id,sub_order_mid,class_name,shoe_size,student_no,weight)
value (%s,%s,%s,%s,%s,%s,%s,%s,%s,%s,%s,%s,%s,%s,%s,%s,%s,%s,%s,%s,%s,%s,%s,%s)',order_value) except Exception as e: print e finally: cursor.close() self.__db.commit() self.__db.close() # 生成order表所需字段,并调用sql def order_data(self,id_value,data_number): order_value=list() for i in range(1,data_number): pay_id=str(id_value[i-1]).replace("L,)","").replace("(","") order_value.append(("周瑜",35999,346,"A城小学","13322222222",130,1,pay_id,
str(random.randint(7100000000,7999999999)),2,8800,8800,1,49338,time.localtime(),49338,time.localtime(),
405,121,564123698745632,"三年级 3班",30,30,30)) sys_time=time.localtime() self.order_insert(order_value) return sys_time # 获取order_id def get_order_id(self,sys_time,data_number): try: self.isConnection() global cursor cursor=self.__db.cursor() cursor.execute('select id from `order表` where create_time >= %s',sys_time) order_id_list=list() for i in range(1,data_number): order_id_list.append(cursor.fetchone()) return order_id_list except Exception as e: print e finally: cursor.close() self.__db.commit() self.__db.close() # 插入数据进order_detail表 def order_detail_insert(self,detail_value): try: self.isConnection() global cursor cursor=self.__db.cursor() cursor.executemany('insert into `order_details表` (order_id,commodity_name,commodity_id,original_price,
payment_price,img,number,status,create_by,create_time,update_by,update_time)
value (%s,%s,%s,%s,%s,%s,%s,%s,%s,%s,%s,%s)',detail_value) except Exception as e: print e finally: cursor.close() self.__db.commit() self.__db.close() # 生成order_detail表所需字段,并调用sql def order_detail_data(self,order_id_list,data_number): detail_value=list() for i in range(1,data_number): order_id=str(order_id_list[i-1]).replace("L,)","").replace("(","") detail_value.append((order_id,"A城小学春季校服","1382932636506902530",8800,8800,
"https://ygxf-dev2.obs.cn-north-1.myhuaweicloud.com:443/image%2F1618551784845-589.jpg",1,2,49338,
time.localtime(),49338,time.localtime())) self.order_detail_insert(detail_value) if __name__ == '__main__': db=DatabaseAcess() data_number=3 db.order_detail_data(order_id_list=db.get_order_id(sys_time=db.order_data(id_value=db.get_pay_id(now_time=db.pay_data
(data_number=data_number),data_number=data_number),data_number=data_number),data_number=data_number),
data_number=data_number) print ("{0}条数据插入完成".format(data_number-1))
关于python往数据库批量插入数据的方法就介绍到这,上述实例具有一定的借鉴价值,感兴趣的朋友可以参考,希望能对大家有帮助,想要了解更多python批量插入数据的内容,大家可以关注其它的相关文章。
文本转载自脚本之家
免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:mmqy2019@163.com进行举报,并提供相关证据,查实之后,将立刻删除涉嫌侵权内容。
猜你喜欢
在写django drf的时候会遇到搜索,以及过滤的情况,这篇文章主要给大家介绍了关于DRF过滤排序分页异常处理的相关资料,需要的朋友可以参考下
Python是一种知道如何不妨碍你编写程序的编程语言。它易于学习,功能强大,足以构建Web应用程序并自动化无聊的东西。本文是对常用字符串操作进行了详细的总结分析,希望对您有所帮助。
本文详细讲解了Pytest框架之fixture,文中通过示例代码介绍的非常详细。对大家的学习或工作具有一定的参考借鉴价值,需要的朋友可以参考下
这篇文章主要介绍了python设计模式之装饰器模式,文章基于python得设计模式资料展开饰器模式得详细资料,具有一定的参考价值,需要的小伙伴可以参考一下
今天带大家学习怎么用python实现一个无界面的小型图书管理系统,文中有非常详细的图文解说及代码示例,对正在学习python的小伙伴们有很好地帮助,需要的朋友可以参考下
成为群英会员,开启智能安全云计算之旅
立即注册Copyright © QY Network Company Ltd. All Rights Reserved. 2003-2020 群英 版权所有
增值电信经营许可证 : B1.B2-20140078 粤ICP备09006778号 域名注册商资质 粤 D3.1-20240008