本文共 417 字,大约阅读时间需要 1 分钟。
requests模块:python中原生的一款基于网络请求的模块
作用:模拟浏览器发送请求如何使用(requests模块的编码流程):
pip install requests
import requests# 1.指定urlurl = 'https://www.sogou.com/'# 2.发起请求# get方法会返回一个相应对象response = requests.get(url=url)# 3.获取相应数据,text返回的是字符串形式的数据page_text = response.textprint(page_text)# 4.持久化存储with open('./sougou.html', 'w', encoding='utf-8') as fp: fp.write(page_text)print('数据爬取结束')
爬取后页面:
转载地址:http://ksne.baihongyu.com/