使用mysql+sqlalchemy中文亂碼問題（mysql5.7+）

 

當把pd.DataFrame數據存入數據庫時報錯：

#存入數據庫
engine = create_engine('mysql+pymysql://用戶名:密碼@39.100.49.243:3306/adventure')

gather_customer_order_city_10_11.to_sql('pt_bicy_november_october_top10_city', con = engine, if_exists='replace', index=False)

報錯❌：

InternalError: (pymysql.err.InternalError) 
(1366, "Incorrect string value: '\\xE4\\xB8\\x8A\\xE6\\xB5\\xB7...' for column 'chinese_city' at row 1")

 

參考了一些文章：

https://blog.csdn.net/lanyang123456/article/details/63289801

原因是：后台DB表及字段編碼問題。

辦法1：

如果數據庫中沒有這個表，會創建新表，但不會存入數據。可以修改字段名：

mysql> alter table pt_bicy_november_october_top10_city  modify create_year_month text charset utf8;
Query OK, 0 rows affected (0.08 sec)

mysql> alter table pt_bicy_november_october_top10_city  modify chinese_city text charset utf8;
Query OK, 0 rows affected (0.08 sec)

alter table 表名 modify 字段名稱 字段定義 ⚠️只修改字段定義。

 

辦法2:

在存入數據庫前，創建這個表並指定字符集為utf8。

1. 可以先上傳，會自動創建表，但報錯后，無數據存入
2. show create table 表名字
3. 刪除剛剛創建的表，drop table xxx;
4. 復制顯示的創建表的代碼，然后修改最后一行charset=utf8;
5. 重新上傳。

CREATE TABLE `pt_bicycle_product_sales_month` ( `product_name` text, `cpzl_zw` text, ) ENGINE=InnoDB DEFAULT CHARSET=utf8；

 

 

 

 

 

辦法3（對我的系統來說，不管用）

第一步，配置mysql

vim /etc/mysql/mysql.conf.d/mysqld.cnf

vim /etc/mysql/my.cnf

在my.cnf文件中添加

[client]

default-character-set=utf8

在[mysqld]下添加

character-set-server=utf8

然后保存，重啟mysql。

驗證，輸入命令：show variables like 'character%';結果如下，證明更改成功。

mysql> show variables like 'character%';
+--------------------------+----------------------------+
| Variable_name            | Value                      |
+--------------------------+----------------------------+
| character_set_client     | utf8mb4                    |
| character_set_connection | utf8mb4                    |
| character_set_database   | utf8mb4                    |
| character_set_filesystem | binary                     |
| character_set_results    | utf8mb4                    |
| character_set_server     | utf8mb4                    |
| character_set_system     | utf8                       |
| character_sets_dir       | /usr/share/mysql/charsets/ |
+--------------------------+----------------------------+
8 rows in set (0.00 sec)

 

但之后嘗試不管用。

辦法3參考了

https://stackoverflow.com/questions/10957238/incorrect-string-value-when-trying-to-insert-utf-8-into-mysql-via-jdbc

https://blog.csdn.net/davy886/article/details/80645782