原文:开源一个C#写的小爬虫,简单实用

出于工作上的需要,两年前wl 和我一起写了一个微型的爬虫库 目前还称不上一个爬虫,仅仅是对一些抓取操作的封装而已 。后来便一直没怎么管它,直到最近有时间,我们修复了所有已发现的Bug,完善了一些功能,并对代码进行了重构。现在将其开源,取名为EasySpider,意为一个简单实用的抓取库。开源的目的是希望这个项目能为有同样需求的朋友们节省一些时间,如果侥幸哪位朋友能用到,我们会倍感荣幸。 ps:本 ...

2012-08-19 23:01 28 8088 推荐指数:

查看详情

C#一个简单爬虫

最近研究C#爬虫写法,搞了半天,才在网上很多的写法中整理出了一个简单的demo(本人菜鸟,大神勿喷)。一是为了自己记录一下以免日后用到,二是为了供需要朋友参考。 废话不多说,上代码 其中解析html的写法用到了XPath的语法,大家可以自行百度下,比较简单。 ...

Mon Jul 16 18:37:00 CST 2018 1 3109
一个简单实用C#日志类

不管是Web应用还是Windows Forms 应用,系统日志我们都经常用到。日志可以帮助我们跟踪监视系统的运行状况,及时发现错误,输出调式信息等。记录日志的方法很多,比如用文本文件、XML文件、数据库等。而用文本文件记录日志是最常用的方法之一。 这里就是一个用文本文件记录日志的简单实用 ...

Sat Jun 08 06:13:00 CST 2013 1 5853
一个简单C#爬虫程序

    这篇这篇文章主要是展示了一个C#语言如何抓取网站中的图片。实现原理就是基于http请求。C#给我们提供了HttpWebRequest和WebClient两个对象,方便发送请求获取数据,下面看如何实 1,HttpGetAction方法。用于发送请求获取数据后处理字符串得到图片 ...

Wed Nov 20 07:36:00 CST 2019 1 475
用Python一个爬虫吧!

学习了一段时间的web前端,感觉有点看不清前进的方向,于是就写了一个爬虫,爬了51job上前端相关的岗位,看看招聘方对技术方面的需求,再有针对性的学习。 我在此之前接触过Python,也写过一些小脚本,于是决定用Python来完成这个小项目。 首先说说一个爬虫的组成部分: 1.目标连接 ...

Tue Sep 11 20:01:00 CST 2018 0 3533
一个简单的网络爬虫

下手。使用baidu,google却有无法避免的搜索到此站点之外的内容。于是就想如果有一个爬虫,可以抓取指定域 ...

Sat Dec 27 21:12:00 CST 2014 1 3076
爬虫浅谈一:一个简单c#爬虫程序

这篇文章只是简单展示一个基于HTTP请求如何抓取数据的文章,如觉得简单的朋友,后续我们再慢慢深入研究探讨。 图1: 如图1,我们工作过程中,无论平台网站还是企业官网,总少不了新闻展示。如某天产品经理跟我们说,推广人员想要抓取百度新闻中热点要闻版块提高站点百度排名。要抓取百度的热点要闻 ...

Thu Jun 07 01:30:00 CST 2018 29 30582
C# Dapper 的简单实用

首先引入dapper PM>Install-Package Dapper (可能会出现因版本问题而安装失败详情见官网:https://stackexchange.github.io/Dappe ...

Fri Oct 11 06:30:00 CST 2019 0 327
C# 一个生成随机汉语名字的程序

最近因为要做数据库相关的测试,频繁使用到测试数据,手动添加太过于麻烦,而且复用性太差,因此干脆花了点时间写了一个生成随机姓名和相关数据的类,贴在这里,有需用的同志们可以参考一下。代码本身质量不好,也不算规范,各取所需莫要取笑-。- 其中姓氏取得所有百家姓的姓,名字只是从下面一百多个 ...

Fri Jul 31 02:55:00 CST 2015 0 5453
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM