此次要實現的目標是登錄12306網站和查看火車票信息。 具體步驟 一、登錄 登錄功能是通過使用selenium實現的，用到了超級鷹來識別驗證碼。沒有超級鷹賬號的先注冊一個賬號，充值一點題分，然后把下載這個Python接口文件，再在里面添加一個use_cjy的函數，以后使用的時候傳入 ...

一.網絡爬蟲（Web Crawler） 1.網絡爬蟲：是一種按照一定的規則，自動地抓取網上信息的程序或者腳本。 2.爬蟲：為了獲取網上大量的我們能看的到或看不到的數據 3.基本步驟：（1）定位要爬的網頁地址；（2）獲取網址的html文檔；（3）解析網址的html文檔；（4）搜尋要下載的數據 ...

最近在抽空學了一下python，於量就拿爬是練了下手，不得不說python的上手非常簡單。在網上找了一下，大都是python2的帖子，於是隨手寫了個python3的。代碼非常簡單就不解釋了，直接貼代碼。 #test rdp import urllib.request import re ...

在網上找到了一份斗魚彈幕服務器第三方接入協議v1.6.2，有了第三方接口，做起來就容易多了。 一、協議分析 斗魚后台協議頭設計如下： 這里的消息長度是我們發送的數據部分的長度和頭部的 ...

一、什么是爬蟲　　 　　首先簡單的理解一下爬蟲。即請求網站並且提取自己所需的數據的一個過程。至於怎么爬，將是后面進行學習的內容，暫且不必深究。通過我們的程序，可以代替我們向服務器發送請求，然后進行批量、大量的數據的下載。 二、爬蟲的基本流程 發起請求：通過url向服務器發起 ...

Infi-chu: http://www.cnblogs.com/Infi-chu/ 一、設置代理 1.urllib #HTTP代理類型 from urllib.error impor ...

　　關於請求網頁，不得不提requests這個庫，這是爬蟲經常用到的一個第三方庫，用pip安裝即可。 requests用法很多，這里只寫一些基礎的，其他高級功能可參考官方文檔。 　　關於requests還有一些其他用法對我們已有的爬蟲程序也很有 ...