数据采集程序
背景：公司想做一个小功能获取公共数据，但数据是按月生成，要十几个网站每月手动复制整理太慢，所以干脆搞了一个爬虫程序实现自动爬取数据并解析整理入库；这里是公共数据所以合法合规。
实现：发现使用python公共爬取脚本实现不了因为目标网站有设置反爬机制；只能通过第三方API实现，这里选择的是selenium，实现原理是模拟浏览器访问和模拟点击事件让目标接口以为是正常访问。
成果：实现后打包为 .exe 文件只需每月双击自动采集目标网址公共数据采集完成后将数据整理存表即可，当然也可以搞成定时任务自动爬取数据。通过此方式可以说任何网站的数据只要你想要就可以采集到(前提是合法合规哈)，有类似需求的伙伴可以交流下。
备注：采集程序和打包文件截图如下，如果打包exe文件也可以自定义图片
