Python Excel 合並 去重

原文：https://blog.csdn.net/weixin_40508682/article/details/90666748

Excel的合並：

import pandas as pd
import os


excel_dir = 'D:\Program Files (x86)\Geany\code\Code-Common\excel'
os.chdir(excel_dir)
li = []
for i in os.listdir(excel_dir):
    li.append(pd.read_excel(i))
    print('已合並'+i)
# 合並完成后的excel，是放在excel文件夾下的
writer = pd.ExcelWriter('test.xlsx')
pd.concat(li).to_excel(writer,'sheet1',index=False)

writer.save()
print('合並完成')

Excel 去重

import pandas as pd

frame = pd.read_excel('test.xlsx')
data = pd.DataFrame(frame)
data.drop_duplicates(['標題鏈接'], keep='first', inplace=True)
# drop_duplicates用法：subset=‘需要去重復的列名’,keep=‘遇到重復的時保留第一個還是保留最后一個’,inplace=‘去除重復項，還是保留重復項的副本’
data.to_excel('out.xlsx')
print('合並完成')