Socket网络编程--网络爬虫(3)
上一小节我们实现了从博客园的首页获取一些用户的用户名，并保存起来。接下来的这一小节我将对每个用户名构建一个用户的博客主页，然后从这个主页获取所有能获取到的网页，网页的格式现在是http://www ...
原文：Socket网络编程--网络爬虫(1)
我们这个系列准备讲一下 网络爬虫。网络爬虫是搜索引擎系统中十分重要的组成部分，它负责从互联网中搜集网页，采集信息，这些网页信息用于建立索引从而为搜索引擎提供支持，它决定着整个引擎系统的内容是否丰富，信息是否即时，因此其性能的优劣直接影响着搜索引擎的效果。网络爬虫的基本工作原理： 从一个初始URL集合中挑选一个URL，下载该URL对应的页面 解析该页面，从该页面中抽取出其包含的URL集合，接下来将 ...
2014-08-08 22:18 2 2586 推荐指数：
相关推荐
网络编程：socket 编程
socket 编程 -客户端/服务器架构 ：即 C/S架构 1，硬件C/S 架构(打印机) 2, 软件C/S 架构(web服务) C/S架构与socket的关系：socket就是为了完成C/S架构的开发 -osi 七层： 应用层--运输层--网络层--链路层--物理层 ...
Python Socket 网络编程
Socket 是进程间通信的一种方式，它与其他进程间通信的一个主要不同是：它能实现不同主机间的进程间通信，我们网络上各种各样的服务大多都是基于 Socket 来完成通信的，例如我们每天浏览网页、QQ 聊天、收发 email 等等。要解决网络上两台主机之间的进程通信问题，首先要唯一标识该进 ...
Linux Socket 网络编程
Linux下的网络编程指的是socket套接字编程，入门比较简单。在学校里学过一些皮毛，平时就是自学玩，没有见识过真正的socket编程大程序，比较遗憾。总感觉每次看的时候都有收获，但是每次看完了之后，过段时间不看，重新拾起这些知识的时候又要从头开始，所以，在这里做个笔记也算是做个模板 ...
iOS 网络编程：socket
@import url(http://i.cnblogs.com/Load.ashx?type=style&file=SyntaxHighlighter.css); @import url(/css/cuteeditor.css); 1 Socket基础 在IOS中 ...
python --------------网络（socket）编程
一、网络协议 客户端/服务器架构 1.硬件C/S架构（打印机） 2.软件C/S架构（互联网中处处是C/S架构）：B/S架构也是C/S架构的一种，B/S是浏览器/服务器 C/S架构与socket的关系：我们用socket就是为了完成C/S架构的开发 osi七层 引子： 须知一个完整 ...
python：socket网络编程
Socket 网络上的两个程序通过一个双向的通信连接实现数据的交换，这个连接的一端称为一个socket， 又称为“套接字”。 模块 创建套接字 family: 套接字家族可以使AF_UNIX或者AF_INET type: 套接字类型 ...
Socket网络编程（1）
提供传输保证。 网络层 (Network)：网络层协议由一系列协议组成，包括 ICMP、IGMP、R ...