基於PHP的數據爬取
簡單、 靈活、強大的PHP采集工具,讓采集更簡單一點。
簡介:
QueryList使用jQuery選擇器來做采集,讓你告別復雜的正則表達式;QueryList具有jQuery一樣的DOM操作能力、Http網絡操作能力、亂碼解決能力、內容過濾能力以及可擴展能力;可以輕松實現諸如:模擬登陸、偽造瀏覽器、HTTP代理等意復雜的網絡請求;擁有豐富的插件,支持多線程采集以及使用PhantomJS采集JavaScript動態渲染的頁面。
安裝
通過Composer安裝:
composer require jaeger/querylist
使用教程:
直接上代碼:
<?php
include './vendor/autoload.php';
// 使用composer安裝后引入目錄
use QL\QueryList;
// 使用插件
$html = file_get_contents('https://www.biqudu.com/14_14778/');
// 手動獲取頁面
$data = QueryList::html($html);
// 得到頁面內容
$data = QueryList::setHtml('https://www.biqudu.com/14_14778/');
// 等同於上面的html()
$data->rules([
// 采集所有a標簽的href屬性
'link' => ['a','href'],
// 采集所有a標簽的文本內容
'text' => ['a','text']
]);
// 此處$data = 上面已經獲取到網頁內容之后的對象
// 設置采集規則 替代了傳統正則
$data->query();
// 此處$data = 上面已經獲取到網頁內容之后的對象
// query 執行操作
$data->getData();
// 此處$data = 上面已經獲取到網頁內容之后的對象
// 得到數據結果
$data->all();
// 此處$data = 上面已經獲取到網頁內容之后的對象
// 將數據轉換成二維數組
print_r($data->all());
// 打印結果
上面的基本使用方法就是這樣了 這樣我們已經可以抓取到一定的數據了
如果你對爬取數據感興趣 歡迎前往官網查看文檔 超級傳送門(點我)