今天就跟大家聊聊有關(guān)怎么編寫Python爬蟲爬取B站小視頻的源碼,可能很多人都不太了解,為了讓大家更加了解,小編給大家總結(jié)了以下內(nèi)容,希望大家根據(jù)這篇文章可以有所收獲。

成都創(chuàng)新互聯(lián)是一家專業(yè)提供大新企業(yè)網(wǎng)站建設(shè),專注與做網(wǎng)站、成都做網(wǎng)站、H5頁面制作、小程序制作等業(yè)務(wù)。10年已為大新眾多企業(yè)、政府機構(gòu)等服務(wù)。創(chuàng)新互聯(lián)專業(yè)的建站公司優(yōu)惠進行中。
如果要爬取多頁的話 在最下方循環(huán)中 填寫好循環(huán)的次數(shù)就可以了
項目源碼
from fake_useragent import UserAgentimport requestsimport timeua=UserAgent()def downloader(url, path):start = time.time() # 開始時間size = 0headers = {'User-Agent':ua.random}response = requests.get(url, headers=headers, stream=True) # stream 屬性必須帶上chunk_size = 1024 # 每次下載的數(shù)據(jù)大小content_size = int(response.headers['content-length']) # 總大小if response.status_code == 200:print('[文件大小]:%0.2f MB' % (content_size / chunk_size / 1024)) # 換算單位with open(path, 'wb') as file:for data in response.iter_content(chunk_size=chunk_size):file.write(data)size += len(data) # 已下載的文件大小print('\r' + '[下載進度]:%s%.2f%%' % ('>' * int(size * 50 / content_size), float(size / content_size *100)), end=" ")end = time.time() # 結(jié)束時間print('\n' + '視頻下載完成!用時%.2f秒' % (end - start))def The_URL(page):URL='http://api.vc.bilibili.com/board/v1/ranking/top?page_size=10&next_offset={}&tag=%E4%BB%8A%E6%97%A5%E7%83%AD%E9%97%A8&platform=pc'.format(page)headers={'User-Agent':ua.random}sponse=requests.get(URL,headers=headers).json()item=sponse.get('data').get('items')for i in item:ite=i.get('item')#視頻標題Video_name=ite.get('description')#發(fā)布日期Release_time=ite.get('upload_time_text')#視頻下載地址Video_download_link=ite.get('video_playurl')#視頻作者The_name=i.get('user').get('name')try:print('當前下載的是:%s'%Video_name)downloader(Video_download_link,path='%s.mp4'%Video_name)except Exception as e:print(e.args)for i in range(0,100):i=i*10+1The_URL(i)
看完上述內(nèi)容,你們對怎么編寫Python爬蟲爬取B站小視頻的源碼有進一步的了解嗎?如果還想了解更多知識或者相關(guān)內(nèi)容,請關(guān)注創(chuàng)新互聯(lián)行業(yè)資訊頻道,感謝大家的支持。
本文題目:怎么編寫Python爬蟲爬取B站小視頻的源碼
路徑分享:http://www.chinadenli.net/article44/gpohee.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供建站公司、網(wǎng)站維護、網(wǎng)站改版、網(wǎng)站收錄、網(wǎng)站建設(shè)、全網(wǎng)營銷推廣
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時需注明來源: 創(chuàng)新互聯(lián)