Python爬蟲一爬取B站小視頻源碼

如果要爬取多頁的話 在最下方循環中 填寫好循環的次數就可以了

項目源碼

from fake_useragent import UserAgent
import requests
import time
 
ua=UserAgent()
 
 
def downloader(url, path):
    start = time.time()   # 開始時間
    size = 0
    headers = {
        'User-Agent':ua.random
    }
    response = requests.get(url, headers=headers, stream=True)   # stream 屬性必須帶上
    chunk_size = 1024    # 每次下載的數據大小
    content_size = int(response.headers['content-length'])   # 總大小
    if response.status_code == 200:
        print('[文件大小]:%0.2f MB' % (content_size / chunk_size / 1024))   # 換算單位
        with open(path, 'wb') as file:
            for data in response.iter_content(chunk_size=chunk_size):
                file.write(data)
                size += len(data)   # 已下載的文件大小
                print('\r' + '[下載進度]:%s%.2f%%' % ('>' * int(size * 50 / content_size), float(size / content_size *
                                                                                             100)), end=" ")
    end = time.time()    # 結束時間
    print('\n' + '視頻下載完成！用時%.2f秒' % (end - start))
 
 
 
def The_URL(page):
    URL='http://api.vc.bilibili.com/board/v1/ranking/top?page_size=10&next_offset={}&tag=%E4%BB%8A%E6%97%A5%E7%83%AD%E9%97%A8&platform=pc'.format(page)
    headers={
        'User-Agent':ua.random
    }
    sponse=requests.get(URL,headers=headers).json()
    item=sponse.get('data').get('items')
    for i in item:
        ite=i.get('item')
        #視頻標題
        Video_name=ite.get('description')
 
        #發布日期
        Release_time=ite.get('upload_time_text')
 
        #視頻下載地址
        Video_download_link=ite.get('video_playurl')
 
        #視頻作者
        The_name=i.get('user').get('name')
 
        try:
            print('當前下載的是:%s'%Video_name)
            downloader(Video_download_link,path='%s.mp4'%Video_name)
        except Exception as e:
            print(e.args)
 
for i in range(0,100):
    i=i*10+1
    The_URL(i)

初學者對Python的概念模糊不清的，Python能做什么，學的時候該按照什么線路去學習，學完往哪方面發展，想深入了解，詳情可以復制有道雲筆記鏈接到瀏覽器打開了解：http://note.youdao.com/noteshare?id=e4fa02e7b56d7909a27674cdb3da08aa

學習視頻資料、開發工具等都有免費分享，還有專業的老師答疑