setting文件 随机更换user-agent 每次url请求更换一次user-agent pip install fake-useragent settings ...

今天的课程总结： 装饰器 迭代器&生成器 json&pickle实现数据的序列化 软件目录结构规范 一、装饰器 　　装饰器的本质是函数，起目的就是用来为其它 ...

一、函数对象 函数可以被引用 2、可以当作参数传递 3、 ...

7-1 爬虫和反爬的对抗过程以及策略 Ⅰ、爬虫和反爬虫基本概念 爬虫：自动获取网站数据的程序，关键是批量的获取。 反爬虫：使用技术手段防止爬虫程序的方法。 误伤：反爬虫技术将普通用户识别为爬虫，如果误伤过高，效果再高也不能用。 成本：反爬虫需要的人力和机器成本。 拦截 ...

什么是模块： 模块就是一个功能的集合。 模块就和乐高积木差不多，你用这些模块组合出一个模型，然后也可以用这个模块加上其他的模块组合成一个新的模型 模块的种类： 1、内置模块（python自带的比如os、file等模块） 2、自定义模块，自己写的模块 3、第三方模块 模块的导入 ...

模块，用一砣代码实现了某个功能的代码集合。 类似于函数式编程和面向过程编程，函数式编程则完成一个功能，其他代码用来调用即可，提供了代码的重用性和代码间的耦合。而对于一个复杂的功能来，可能需要多个函 ...

一.if语句 1.1 功能 计算机又被称作电脑，意指计算机可以像人脑一样，根据周围环境条件（即expession）的变化做出不同的反应（即执行代码） i ...

最近比较忙， behave的项目结束之后，又加入了一新项目，一开始说要用C#语言来写selenium自动化，后来跟客户确定使用QTP来写。 个人还是比较喜欢用C#语言和selenium框架的。因为qtp，市场上用的不多，发展前途受限制，再加上vbscript语言现在基本上没有人使用了。 OK ...