:爬取(谷歌/百度/搜狗)的搜索结果

【Python爬虫】:爬取(谷歌/百度/搜狗)的搜索结果[Python基础]

步骤如下:
1.首先导入爬虫的package:requests

2.使用UA 伪装进行反反爬虫,将爬虫伪装成一个浏览器进行上网

3.通过寻找,找到到谷歌搜索时请求的url。

假设我们在谷歌浏览器当中输入:不知道

我们可以得到请求结果的网址如下:

 

 也就是:

https://www.google.com/search?q=%E4%B8%8D%E7%9F%A5%E9%81%93&rlz=1C1CHWL_zh-CNAU918AU918&oq=%E4%B8%8D%E7%9F%A5%E9%81%93&aqs=chrome.0.69i59l2.885j0j1&sourceid=chrome&ie=UTF-
hmoban主题是根据ripro二开的主题,极致后台体验,无插件,集成会员系统
自学咖网 » :爬取(谷歌/百度/搜狗)的搜索结果