抓取bing搜索无结果

阿米尔侯赛因·阿拉比吉

我使用下面的代码从bing抓取结果，当我看到抓取的网页时，它说“ python没有结果”。但是当我在浏览器中搜索时没有问题。

import requests
from bs4 import BeautifulSoup

term = 'python'
url = f'https://www.bing.com/search?q={term}&setlang=en-us'
response = requests.get(url)
soup = BeautifulSoup(response.text, 'html.parser')
print(soup.prettify())

我搜索了，但没有发现任何类似的问题

昆杜克

您需要user-agent在请求获取值时传递while。

import requests
from bs4 import BeautifulSoup

term = 'python'
url = 'https://www.bing.com/search?q={}&setlang=en-us'.format(term)
headers = {'User-Agent':'Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/47.0.2526.106 Safari/537.36'}
response = requests.get(url,headers=headers)
soup = BeautifulSoup(response.text, 'html.parser')
print(soup.prettify())

本文收集自互联网，转载请注明来源。

如有侵权，请联系 [email protected] 删除。