Python爬蟲時Pandas循環一行行的寫入csv以及其他格式


import pandas as pd

write_clo = ['第一列','第二列','第三列','第四列']

df = pd.DataFrame(columns=(write_clo))

df.to_csv(fileName,line_terminator="\n",index=False,mode='a',encoding='utf8')

當然,爬蟲時一行行的寫入時,‘第一行’,‘第二行’等等這些字樣就換成變量即可。

for循環下以此的寫入即可,當大數據量下,pandas還是比csv寫入更好一些的,速度方面

還有后期的數據處理也更加方便。其他格式參考上文即可

效果圖如下:

 


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM