安裝kubernetes遇見問題 kubectl describe pod coredns -n kube-system, 查看發現coredns readiness 一直unhealthy， 並且一直報503 kubectl logs --tail coredns -n ...

　　這些天應朋友的要求抓取某個論壇帖子的信息，網上搜索了一下開源的爬蟲資料，看了許多對於開源爬蟲的比較發現開源爬蟲scrapy比較好用。但是以前一直用的java和php，對python不熟悉，於是花一天時間粗略了解了一遍python的基礎知識。然后就開干了，沒想到的配置一個運行環境就花了我一天 ...

1. 爬蟲出現Forbidden by robots.txt 解決方法：setting.py ROBOTSTXT_OBEY = True 改成False 原因：scrapy抓包時的輸出就能發現，在請求我們設定的url之前，它會先向服務器根目錄請求一個txt文件 這個文件中規定了本站點允許 ...

在windows下： pip install scrapy 最后一步報錯： 本來以為是缺少 Microsoft Visual C++ 14.0 這個庫，一看下載需要400多M，算了再看下報錯。。。 感覺是少了twisted這個包 然后找到了這個網址》》》 https ...

Scrapy 這個爬網框架真心不錯，但在OSX上安裝總是會出現各種的問題，在這里就作一個收集匯總。我的系統環境是 OS X El Capitan (10.11.1) 首先要保證 pip , virtualenv 和 setuptools 是最新版本 如果你能直接運行以下的安裝指令，只能 ...

1.先看官方文檔： 官方效果： 注意：如果你直接把文檔中這塊代碼粘貼過去是不會有效果的，如果問為什么，下面是原因： 說的很清楚了，必須有form進行渲染，也就 ...

　　查閱文檔后，以為table表格設置寬度只用給其中td設置寬度就行了，th寬度會根據td自動增加，然后table寬度也就被撐開了。可設置好td寬度后發現table寬度是會根據屏幕尺寸伸縮的，如下圖： ...

scrapy 基礎教程 1. 認識Scrapy: 來一張圖了解一下scrapy工作流程：(這張圖是在百度下載的) scrapy 各部分的功能： 　　1. Scrapy Engine(引擎): 負責Spider,Item Pipeline,Downloader,Scheduler 中間 ...