前期准备工作
selenium库的安装
selenium 是一个用于Web应用程序测试的工具,可以模拟真实浏览器,自动化测试工具,支持多种浏览器,爬虫中主要用来解决JavaScript渲染(动态加载渲染)问题。
安装过程: 首先,打开在电脑中打开cmd命令行,按WIN键+R键打开运行,输入cmd后回车进入命令提示符;
其次,使用pip安装selenium,在命令行中输入pip install selenium,过程可能比较缓慢,请耐心等候!
最后,可使用以下命令查看是否安装成功:
pip show selenium
chromedriver的安装
chromedriver的版本一定要与Chrome的版本一致,不然就不起作用。
有两个下载地址:
当然,你首先需要查看你的Chrome版本,在浏览器中输入chrome://version/
例如我的版本是80.0.3987.132,所以按图示下载
按照对应的操作系统进行下载
开始配置
- 方式一:解压压缩包,找到chromedriver.exe复制到chrome的安装目录,大多数chrome的安装目录都是 C:\Program Files (x86)\Google\Chrome\Application,到这里爬取前准备工作全部完成。
- 方式二:如果没有找到chrome的安装目录,那么复制chromedriver.exe文件的文件夹的路径并加入到电脑的环境变量中去,具体的:
找到我的电脑>>属性>>高级系统设置 , 然后按照图示操作:
进入Path界面之后,点击新建,将之前下载的chromedriver文件夹地址复制到文本框中。
完成后在cmd下输入chromedriver验证是否安装成功
配置环境变量很重要,后面很多软件安装操作都需要配置环境变量。
至此,所有前期准备工作已完成。
本文使用 mdnice 排版