图 2:设置开始页面
图 3:文件保存地址
第三步:将每个文件保存至其分类所对应的目录。这里取消下载 HTML 文件本地浏览
图 4:设置探索过滤器
第四步:过滤整个站点的图片,包括根站点与子链接的所有站点图片,并且忽略弹出的窗口进行搜索。
图 5:设置文件过滤器
第五步:选择过滤的文档类型(.pdf),默认下面的文件过滤器,点击 “前进” 进行下一步。
图 6:站点抓取过程
第六步:等待对站点图片进行检索,检索到的文档会在右边信息框内显示,并且 IDM 会自动对抓取的文件进行统计,实时查看抓取状态以及抓取文件数量。
图 7:下载选中图片并保存到队列中
最后完成的数量高达 4800 多个文档 ,如果你手动下载,估计至少 2 天吧。
站点抓取是 IDM 中非常实用的一项特色功能,能够方便用户各项操作的同时提高用户的工作效率。除此之外,站点抓取功能也可以配合 “计划任务” 来实现定时下载,满足用户的多样化需求。
当然如果你运气足够好的话,某些网站的付费资源也是一并可以爬取的,这种通常情况 下好像出现在小程序中比较多,也许是开发者只考虑到了小程序前端的限制,没有考虑到一旦获取文件路径,那么就有可能出现不设防。
为了做好运维面试路上的助攻手,特整理了上百道 【运维技术栈面试题集锦】 ,让你面试不慌心不跳,高薪offer怀里抱!
这次整理的面试题,小到shell、MySQL,大到K8s等云原生技术栈,不仅适合运维新人入行面试需要,还适用于想提升进阶跳槽加薪的运维朋友。
本份面试集锦涵盖了
- 174 道运维工程师面试题
- 128道k8s面试题
- 108道shell脚本面试题
- 200道Linux面试题
- 51道docker面试题
- 35道Jenkis面试题
- 78道MongoDB面试题
- 17道ansible面试题
- 60道dubbo面试题
- 53道kafka面试
- 18道mysql面试题
- 40道nginx面试题
- 77道redis面试题
- 28道zookeeper
总计 1000+ 道面试题, 内容 又全含金量又高
- 174道运维工程师面试题
1、什么是运维?
2、在工作中,运维人员经常需要跟运营人员打交道,请问运营人员是做什么工作的?
3、现在给你三百台服务器,你怎么对他们进行管理?
4、简述raid0 raid1raid5二种工作模式的工作原理及特点
5、LVS、Nginx、HAproxy有什么区别?工作中你怎么选择?
6、Squid、Varinsh和Nginx有什么区别,工作中你怎么选择?
7、Tomcat和Resin有什么区别,工作中你怎么选择?
8、什么是中间件?什么是jdk?
9、讲述一下Tomcat8005、8009、8080三个端口的含义?
10、什么叫CDN?
11、什么叫网站灰度发布?
12、简述DNS进行域名解析的过程?
13、RabbitMQ是什么东西?
14、讲一下Keepalived的工作原理?
15、讲述一下LVS三种模式的工作过程?
16、mysql的innodb如何定位锁问题,mysql如何减少主从复制延迟?
17、如何重置mysql root密码? 详情docs.qq.com/doc/DSmdCdUNwcEJDTXFK