原文:Java——獲取網頁內容並在本地生成HTML文件

使用java.net包下的URL類,可以將一個網頁 鏈接 封裝成一個URL對象。URL對象有一個openStream 方法,使用該方法可以獲取該網頁的輸入流,我們可以通過讀取輸入流的方式獲得網頁的內容,並通過輸出流寫入HTML文件中。 方式一: 使用此方法需要指定輸入流和輸出流的字符編碼,否則可能會出現亂碼 步驟: . 通過URL對象的openStream 方法獲得網頁的字節輸入流 . 將字節輸 ...

2019-08-30 16:34 0 1211 推薦指數:

查看詳情

關於java獲取網頁內容

最近項目需求,做一些新聞站點的爬取工作。1.簡單的jsoup爬取,靜態頁面形式; 通過jsop解析返回Document 使用標簽選擇器,選擇頁面標簽中的值,即可獲取頁面內容。 2.延時加載,有些網站存在延時加載,表格內容,或者嵌入頁面形式的加載的頁面;屬於jsop范圍 ...

Fri Nov 23 20:25:00 CST 2018 0 3101
 
粵ICP備18138465號   © 2018-2026 CODEPRJ.COM