小編給大家分享一下使用python爬蟲怎么處理有密碼的網(wǎng)站，相信大部分人都還不怎么了解，因此分享這篇文章給大家參考一下，希望大家閱讀完這篇文章后大有收獲，下面讓我們一起去了解一下吧！

創(chuàng)新互聯(lián)公司2013年至今，先為太子河等服務(wù)建站，太子河等地企業(yè)，進(jìn)行企業(yè)商務(wù)咨詢服務(wù)。為太子河企業(yè)網(wǎng)站制作PC+手機(jī)+微官網(wǎng)三網(wǎng)同步一站式服務(wù)解決您的所有建站問題。

步驟一：查看要爬取的網(wǎng)站信息

進(jìn)入登錄頁(yè)面 。你會(huì)看到如下圖所示的頁(yè)面。

然后進(jìn)行查看元素，查看到name、password，最終我們得到以下內(nèi)容

payload = {
"username": "<USER NAME>",
"password": "<PASSWORD>",
"csrfmiddlewaretoken": "<CSRF_TOKEN>"
}

步驟二、配置網(wǎng)站登錄設(shè)置

創(chuàng)建一個(gè)登錄對(duì)象。

session_requests = requests.session()

設(shè)置一個(gè)登錄的url

result = session_requests.post(
login_url,
data = payload,
headers = dict(referer=login_url)

)

步驟三、爬取信息內(nèi)容

到了這個(gè)步驟，我們已經(jīng)成功進(jìn)行登錄了，用以下方式進(jìn)行爬取：

url = '鏈接'
result = session_requests.get(
url,
headers = dict(referer = url)
)

以上是“使用python爬蟲怎么處理有密碼的網(wǎng)站”這篇文章的所有內(nèi)容，感謝各位的閱讀！相信大家都有了一定的了解，希望分享的內(nèi)容對(duì)大家有所幫助，如果還想學(xué)習(xí)更多知識(shí)，歡迎關(guān)注創(chuàng)新互聯(lián)行業(yè)資訊頻道！

當(dāng)前文章：使用python爬蟲怎么處理有密碼的網(wǎng)站
本文網(wǎng)址：http://www.chinadenli.net/article28/peidjp.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供小程序開發(fā)、服務(wù)器托管、網(wǎng)站改版、網(wǎng)站內(nèi)鏈、自適應(yīng)網(wǎng)站、軟件開發(fā)

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請(qǐng)盡快告知，我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng)，如需處理請(qǐng)聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時(shí)需注明來源： 創(chuàng)新互聯(lián)