python讀取excel保存到mysql

首先安裝xlrd模塊：pip install xlrd ,核心代碼網上有很多，這里主要是關於一些個人實際碰到問題細節的處理

1、excel數據不規范導致讀取的數據存在空白行和列；

2、參數化執行sql

代碼如下，僅供參考：

 

import xlrd

import AppSetting.AppConfig as config
import AppSetting.dbConfig as db

# 處理excel依賴xlrd模塊 pip install xlrd

# 讀取excel文件
excel_data = xlrd.open_workbook(config.file_path)
# 獲取第一個sheet頁
sheet = excel_data.sheet_by_index(0)
# 總行數
rows = sheet.nrows
# 獲取列(經常讀取到的excel可能存在空白行或者空白列，這里根據第一行的數據獲取要導入的數據的列數)
rowlsts = [i for i in sheet.row_values(0) if i != '']
cursor = db.connect.cursor()
# 定義變量n，當n=0 時組裝參數化的sql
n = 0
sql = ""
# 由於excel中第一行存儲的是字段名，獲取數據從第二行開始
for i in range(1, rows):
    try:
        item = sheet.row_values(i)[:len(rowlsts)]
        data = ''
        # 組裝參數化sql，通過拼接%s得到占位符
        for j in range(0, len(rowlsts)):
            data += "%s,"
        data = data.rstrip(',')
        if n == 0:
            sql = "insert into co_zfxx(%s) values( %s )" % (str.join(',', rowlsts), data)
            cursor.execute(sql, tuple(item))
        else:
            cursor.execute(sql, tuple(item))

    except Exception as ex:
        print(ex)

    finally:
        n += 1

db.connect.commit()
cursor.close()
db.connect.close()

本次測試執行5w條數據（26個字段），執行時間22s