python 批量下載文件

之前給大家分享的python 多線程抓取網頁，我覺的大家看了以后，應該會對python 抓取網頁有個很好的認識,不過這個只能用python 來抓取到網頁的源代碼，如果你想用做python 下載文件的話，上面的可能就不適合你了，最近我在用python 做文件下載的時候就遇到這個問題了，不過最終得以解決，為了讓大家以后碰過這個問題有更好的解決辦法，我把代碼發出來：

 

from os.path import basename
from urlparse import urlsplit

def url2name(url):
     return basename(urlsplit(url)[ 2])

def download(url, localFileName = None):
    localName = url2name(url)
    req = urllib2.Request(url)
    r = urllib2.urlopen(req)
     if r.info().has_key( 'Content-Disposition'):
         # If the response has Content-Disposition, we take file name from it
        localName = r.info()[ 'Content-Disposition'].split( 'filename=')[ 1]
         if localName[ 0] ==  '"'  or localName[ 0] ==  "'":
            localName = localName[ 1:- 1]
     elif r.url != url:
         # if we were redirected, the real file name we take from the final URL
        localName = url2name(r.url)
     if localFileName:
         # we can force to save the file as specified name
        localName = localFileName
    f = open(localName,  'wb')
    f.write(r.read())
    f.close()


download( r'你要下載的python文件的url地址')

趕快去試試把，可以在本地運行python去下載一些自己想要的pdf文件吧。

 

文章鏈接：http://www.cnpythoner.com/post/pythonurldown.html 轉載請保留，謝謝！