Python爬虫时Pandas循环一行行的写入csv以及其他格式


import pandas as pd

write_clo = ['第一列','第二列','第三列','第四列']

df = pd.DataFrame(columns=(write_clo))

df.to_csv(fileName,line_terminator="\n",index=False,mode='a',encoding='utf8')

当然,爬虫时一行行的写入时,‘第一行’,‘第二行’等等这些字样就换成变量即可。

for循环下以此的写入即可,当大数据量下,pandas还是比csv写入更好一些的,速度方面

还有后期的数据处理也更加方便。其他格式参考上文即可

效果图如下:

 


免责声明!

本站转载的文章为个人学习借鉴使用,本站对版权不负任何法律责任。如果侵犯了您的隐私权益,请联系本站邮箱yoyou2525@163.com删除。



 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM