# 爬虫使用代理IP
# 导入模块：requests、fake-useragent、UserAgent
import requests
from fake_useragent import UserAgent
# 要访问的url地址
url='https://store.steampowered.com/search/?filter=topsellers'
# 随机请求头
headers={'User-Agent':UserAgent().random}
# 代理ip 的API(IPIDEA网站获取的)
api_url='代理ip 的API(IPIDEA网站获取的)'
res = requests.post(api_url,headers=headers, verify=True)
# proxies = {'协议': '协议://IP:端口号'}
proxie = "https://%s"%(res.text)
proxies = {'http': proxie}
# 打印所有的代理ip
print(proxies)
# 获取亚马逊某热销商品数据 python模块测试并输出结果
html=requests.get(url=url,headers=headers,proxies=proxies).text
print(html)
阅读剩余 0%
本站所有文章资讯、展示的图片素材等内容均为注册用户上传(部分报媒/平媒内容转载自网络合作媒体)，仅供学习参考。
用户通过本站上传、发布的任何内容的知识产权归属用户或原始著作权人所有。如有侵犯您的版权，请联系我们反馈本站将在三个工作日内改正。
