爬取視頻解析網站的解析接口

 我的網站：www.liunian.online （流年在線vip視頻解析）

空間到期沒錢續費已關閉  (。•́︿•̀。)，等有錢吃飯了再買。當初建這個網站就是為了熟悉一下建站過程，用的解析接口都是從別人的網站拿的，源碼也是從網上下載的233333333

 

正文：

想動手寫一個爬取接口的爬蟲，練練手。

不寫不知道，一寫嚇一跳，動手能力確實差，以后還是要多寫多練！

附上代碼：

import requests
from bs4 import BeautifulSoup

def get_htmltext(url):
    try:
        kv = {'user-agent':'mozilla/5.0'}
        r = requests.get(url,headers=kv,timeout=30)
        r.raise_for_status()
        r.encoding = r.apparent_encoding
        return r.text
    except:
        return ''

def get_api(html,ulist):
    soup = BeautifulSoup(html,'html.parser')
    op = soup.find_all('option')
    for tag in op:
        ulist.append(tag.attrs['value'])

def save_api(ulist,path):
    with open(path,'a') as f:
        f.write('\n'+'---------(此次爬取接口如下)------------------------')
        for api in ulist:
            f.write('\n'+ api + '\n')
        f.close()

def main():
    info = []
    save_path = 'D://videoapi.txt'
    url = 'http://' + input("輸入要爬取的視頻解析網站的網址：")
    html = get_htmltext(url)
    get_api(html,info)
    save_api(info,save_path)

main()

目瞪狗呆：原來會自動創建video.txt文件，原來。。。

 

代碼還有很多可以優化的地方，先這樣吧，我要去上課啦  ε=ε=ε=┌( ´°ェ°)┘