網絡爬蟲-HTTP error fetching URL. Status=403

 org.jsoup.HttpStatusException: HTTP error fetching URL. Status=403, URL=http://xxxx.com/xxx/xxx/xxx.html （網絡爬蟲）

 
解決辦法： 設置下userAgent，偽裝成瀏覽器就可以了

Jsoup.connect("<span style="line-height: 1.5; font-size: 1em;">http://xxxx.com/xxx/xxx/xxx.html</span><span style="line-height: 1.5; font-size: 1em;">").userAgent("Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.31 (KHTML, like Gecko) Chrome/26.0.1410.64 Safari/537.31");</span>