python小案例18

154 阅读1分钟

使用python爬虫爬取“虎牙”平台的视频

步骤:

1.确认目标url url:网络资源定位符

2.发送请求(模拟正常用户),获取对应响应

3.解析数据,从一堆响应数据中拿到我们需要的数据

4.保存数据

依次转到 Chrome 菜单 >“设置”>“显示高级设置…”

“更改代理服务器设置…” “LAN 设置”,然后取消选中“为 LAN 使用代理服务器”。

代码如下:

import requests

if __name__ == '__main__':
    #1.确认目标url
    url = "https://anchorpost.msstatic.com/cdnimage/anchorpost/1053/af/5bc9192add9117924ab8cde0b86049_2168_1615562827.jpg?imageview/4/0/w/338/h/190/blur/1/format/webp"
    #设置用户代理
    headers = {
        "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/91.0.4472.114 Safari/537.36",
    }
    #2.发送请求,获取响应
    response = requests.get(url,headers=headers)

    #3.解析数据
    #4.保存数据
    with open("huya.jap","wb") as f:
        f.write(response.content)

本文由mdnice多平台发布