Python

xpinyin库 一、 简介 将汉字转换为拼音的的第三方库：xpinyin 安装： 导包： 二、 基本语法

概述 用爬虫时，大部分网站都有一定的反爬措施，有些网站会限制每个 IP 的访问速度或访问次数，超出了它的限制你的 IP 就会被封掉。对于访问速度的处理比较简单，只要间隔一段时间爬取一次就行了，避免频繁

jieba库 一、 简介 1、 是什么 （1）jieba是优秀的中文分词第三方库 中文文本需要通过分词获得单个的词语 jieba是优秀的中文分词第三方库，需要额外安装 jieba库提供三种分词模式，最

简介 Beautiful Soup是python的一个库，最主要的功能是从网页抓取数据 官方解释 Beautiful Soup提供一些简单的、python式的函数用来处理导航、搜索、修改分析树等功能。

优美图库 一、 网址分析 打开网址里面对应的美女图片专栏通过分析工具可得： 由此可得，图片导航所对应的 url ，都存在一个 li 标签里面 点开其中一个页面 同时分析每一个页面的地址可得 二、 编写

appium 环境搭建 一、 简介 1、 介绍 Appium是一个开源的自动化测试工具，其支持iOS和安卓平台上的原生的，基于移动浏览器的，混合的应用 Appium是基于以下的四个理念设计来满足移动平

JS 常见的加密方式 加密在前端开发和爬虫中是经常遇见的，掌握了加密算法且可以将加密的密文进行解密破解，是你从一个编程小白到大神级别质的飞跃。且加密算法的熟练和剖析也是有助于帮助我们实现高效的 JS

selenium 基础语法 一、 环境配置 1、 安装环境 安装 selenium 第三方库 下载浏览器驱动： Firefox浏览器驱动：geckodriver Chrome浏览器驱动：chromed

爬淘宝商品数据 免责声明：本文所记录的技术手段及实现过程，仅作为爬虫技术学习使用，不对任何人完全或部分地依据本文的全部或部分内容从事的任何事情和因其任何作为或不作为造成的后果承担任何责任 一、 简介

爬虫基础 一、 基本概念 1、 简介 1.1 概念 什么是爬虫？ 爬虫就是通过编写程序，模拟浏览器上网，然后让其去互联网上抓取数据的过程 爬虫的价值： 抓取互联网上面的大量的数据，可以将这些数据商业化

‘ 爬虫高阶 一、 验证码识别 1、 简介 验证码和爬虫之间的爱恨情仇？ 反爬机制：验证码，识别验证码图片中的数据，用于登录验证 识别验证码的操作： 人工肉眼识别（不推荐） 第三方自动识别 打码平台：

高性能异步编程 一、 引入背景 1、 概述 其实爬虫的本质就是client发请求批量获取server的响应数据，如果我们有多个url待爬取，只用一个线程且采用串行的方式执行，那只能等待爬取一个结束后才

线程和进程 一、 什么是进程 / 线程 1、 引论 众所周知，CPU是计算机的核心，它承担了所有的计算任务。而操作系统是计算机的管理者，是一个大管家，它负责任务的调度，资源的分配和管理，统领整个计算机