如何選擇python裡bs4和json方法爬取網頁資訊?
作者:由 il持之以恆li 發表于 遊戲時間:2021-03-24
bs4模組用於解析網頁資訊,json模組用於解析json資料(字典格式的字串)
要實現上述功能,直接字串拼接即可,如果是post請求,那就只能透過樓主的那種方法了。
import
requests
for
i
in
range
(
10
):
url
=
‘https://movie。douban。com/top250?start=
%d
’
%
(
i
*
25
)
headers
=
{
‘user-agent’
:
‘Mozilla/5。0 (Windows NT 10。0; WOW64) AppleWebKit/537。36 (KHTML, like Gecko) Chrome/70。0。3538。25 Safari/537。36’
}
res
=
requests
。
get
(
url
=
url
,
headers
=
headers
)
if
(
res
。
status_code
==
200
):
(
‘第
%d
頁載入成功!’
%
(
i
+
1
))
執行結果:
上一篇:要告訴孩子熊很可愛嗎