廢話不多說,直接說重點:
剛開始做的時候,代理IP,頭部信息池,都已經做好了,使用selenium+phantomjs獲取js動態加載后的源碼
起初挺好的,能出來動態加載后的源碼,但是運行了幾次之后,電腦有點卡頓(估計是運存太小),源碼就獲取不到了,返回的數據
都是空數據,以至於都是出錯
在做的時候一定要給頁面加載之前做一個延時,以保證頁面的正常加載出來,這樣我們才能獲取導數據
我在加載前后都做了延時等待,當然,我這個就是說這個意思,沒必要仿照
可以根據自己的需求進行設置,然后源碼就加載出來了,就是有點慢!