【测试】Selenium 爬虫学习记录 - 自动登录与数据抓取

26 阅读1分钟

【测试】Selenium 爬虫学习记录 - 自动登录与数据抓取 > 本文仅用于 Selenium 自动化爬虫项目测试,验证登录后能否成功抓取用户文章列表。 ## 背景 在学习 Web 自动化测试与数据采集过程中,使用 Selenium + Python 模拟用户行为,实现: - 自动登录掘金账号 - 遍历“我的文章”页面 - 抓取标题、链接和发布时间 - 保存为 CSV 文件 ## 测试环境 - Python 3.10 - Selenium 4.x - ChromeDriver - VS Code 开发环境 ## 预期结果 爬虫程序应能成功识别本篇文章,并将其信息写入 juejin_articles.csv 文件中。 ## 结语 自动化爬虫需遵守网站 robots 协议,仅用于合法、合规的学习目的。 切勿用于商业爬取或高频请求! --- 发布于:2025年12月5日