【马哥专栏】Python爬虫

马哥原创：爬微博博主软件，weibo_user_post_tool，界面软件工具，可以把微博指定用户的已发布帖子的数据采集下来。

马哥原创开发：抖音转换工具软件。支持个人主页链接和个人抖音号互转、app端作品链接转为pc端作品链接等。

马哥原创：用python开发的小红书图片采集工具，一键批量下载无水印图片，同时采集笔记详情和评论数据。

马哥原创：用python开发的小红书转换工具，支持主页链接（uid）与小红书号（redid）一键批量互相转换。

马哥原创：用python开发的小红书蒲公英采集软件。爬取到的字段包含30余个，可助力品牌商高效筛选小红书上的优质博主。

用python开发的微博搜索采集软件，可以指定批量关键词、指定帖子发布时间范围，爬取对应贴子的数据。

一、背景分析 1.1 开发背景 大家都知道，YouTube（以下简称油管）是全球最大的在线视频社交平台，拥有亿万用户和庞大的日活跃用户群体。平台上来自不同国家和地区的创作者们，蕴藏着巨大的商业潜力。通

马哥原创教程：通过谷歌官方提供的方法，开通youtube的API接口，方便后续调用接口实现爬虫，实现稳定运行。

马哥原创：自动采集小红书博主笔记软件。根据小红书博主链接，采集其已发布笔记数据，字段包含：作者昵称,作者id,作者链接,页码,笔记标题,笔记id,笔记链接,笔记类型,点赞数。

马哥原创：抖音搜索采集软件，自动抓取关键词下的抖音视频数据。字段含：关键词,页码,视频标题,视频链接,作者昵称,抖音号,作者链接,作者粉丝数,发布时间,点赞数,评论数,收藏数,转发数。

马哥原创：小红书情采集软件，自动爬取xhs笔记的详情数据，字段含：笔记id,笔记链接,笔记标题,笔记内容,笔记类型,发布时间,修改时间,IP属地,点赞数,收藏数,评论数,转发数,用户昵称等

马哥原创：自研小红书笔记采集软件，支持多个关键词同时采集，字段包含：关键词, 页码, 笔记id, 笔记链接, 笔记标题, 笔记类型, 点赞数, 用户id, 用户主页链接, 用户昵称。

马哥原创，python全流程自动化爬取：采集数据 -> 筛选数据 -> 存MySQL数据库 -> 发送邮件 -> 微信提醒 -> 定时执行。

马哥原创：用Python采集小红书评论，抓取字段包含：笔记链接,页码,评论者昵称,评论者id,评论者主页链接,评论时间,评论IP属地,评论点赞数,评论级别,评论内容。

马哥原创：用Python采集抓取小红书指定话题下的笔记数据，字段包含：笔记标题,笔记id,笔记链接,作者昵称,作者id,作者链接,发布时间。

马哥原创：用python爬头条热榜，字段含：热榜排名,热榜标题,热度值,热榜标签,热榜分类,热榜链接。

马哥原创：用python爬豆瓣电影短评，字段含：评论者昵称, 评论星级, 评论时间, 评论者IP属地, 有用数, 评论内容。

马哥原创爬虫：用python的tkinter库开发YouTube油管评论采集爬虫，并封装成exe界面软件。

马哥原创：用Python爬取知乎回答，含字段：问题id,页码,答主昵称,答主性别,答主粉丝数,答主主页,答主签名,回答id,回答时间,评论数,点赞数,喜欢数,回答内容。