搞爬虫的时候,结果是通过file.write(strs)写入文件的。
带来的问题是,进程如果是被杀死的时候,最后一条结果总是缺损的,因为缓存的部分还未写入文件。
解决办法是每次写入文件时,都刷新缓存,直接将缓存数据全部写入文件:
fi = open('file', 'wb') fi.write('strs') fi.flush() ...
搞爬虫的时候,结果是通过file.write(strs)写入文件的。
带来的问题是,进程如果是被杀死的时候,最后一条结果总是缺损的,因为缓存的部分还未写入文件。
解决办法是每次写入文件时,都刷新缓存,直接将缓存数据全部写入文件:
fi = open('file', 'wb') fi.write('strs') fi.flush() ...
本站转载的文章为个人学习借鉴使用,本站对版权不负任何法律责任。如果侵犯了您的隐私权益,请联系本站邮箱yoyou2525@163.com删除。