scrapy框架的工作流程？ 　　a、spider解析下载器下下来的response，返回item或是links 　　b、item或者link经过spidermiddleware的pro ...

一、试列出至少三种目前流行的大型数据库的名称:________、_________、__________,其中您最熟悉的是__________,从__________年开始使用。 ...

1、 post、get有什么区别？ 答案 2、 http、https协议有什么区别？ 答案 3、 域名和IP之间有什么关 ...

1、接触过几种爬虫模块 　　urllib、requests这两种爬虫模块。 2、robots协议是什么？ 　　它就是一个防君子不防小人的协议，网站有一些数据不想被爬虫程序爬取，可以编写robots协议文件，明确指明哪些内容可以爬取哪些不可以爬取。 　　requests模块中并没有使用硬性 ...

1.爬取数据后使用哪个数据库存储数据的，为什么？ - 2.你用过的爬虫框架或者模块有哪些？优缺点？ - 3.写爬虫是用多进程好？还是多线程好？ - 4.常见的反爬虫和应对方法？ - 5.需要登录的网页，如何解决同时限制ip，cookie,session - 6.验证码的解决? - 7.“极验 ...

前言 　　之所以在这里写下python爬虫常见面试题及解答，一是用作笔记，方便日后回忆；二是给自己一个和大家交流的机会，互相学习、进步，希望不正之处大家能给予指正；三是我也是互联网寒潮下岗的那批人之一，为了找工作而做准备。 一、题目部分 1、python中常用的数据结构有哪些？请简要介绍一下 ...

前言 　　之所以在这里写下python爬虫常见面试题及解答，一是用作笔记，方便日后回忆；二是给自己一个和大家交流的机会，互相学习、进步，希望不正之处大家能给予指正；三是我也是互联网寒潮下岗的那批人之一，为了找工作而做准备。 一、题目部分 1、scrapy框架专题部分（很多面试都会涉及到这部 ...

引言 最近在刷面试题,所以需要看大量的 Python 相关的面试题，从大量的题目中总结了很多的知识，同时也对一些题目进行拓展了，但是在看了网上的大部分面试题不是很满意，一个是有些部分还是 Python2 的代码，另一个就是回答的很简单，有些关键的题目，也没有点出为什么，最重要的是还有一些复制粘贴 ...