Rhp123

还是从最基本的开始，url、resquest的定制、response的请求，等下载使用urlretrieve方法，需要的参数有URL、文件存储的位置等。 需要注意的是，xpath的路径的书写，需要根据

urlib在处理请求上有着强大的作用，xpath对于HTML的处理同样出色，主要分为两部分，一个是对本地文件的处理，使用etree.parse()，还有一个是处理服务器的响应，使用etree.HTML

爬虫在发生情请求时，需要根据根据不同的请求方式，做不同的处理，post请求就需要使用到encode()方法。二而对于批量下载，可以知道data数据的方式，这需要观察网页的响应中，data的数据定制，这

请求对象的定制 #url的组成 #1。协议 http/https（加密） #2。主机（域名） #3。端口号 http(80)/https（443） mysql(3306)

urllib.request.urlopen（）模拟浏览器向服务器发送请求 response 服务器返回的数据 response 的数据类型是httpresponse 字节--》字符串 解码decod

定义函数 函数是带名字的代码块，用于完成具体的工作 参数传递 函数定义中可能包含多个形参，因此函数调用中也可能包含多个实参。 多参数的情况下，可以有多种传递方式。

函数input()的工作原理 函数input()可以让程序暂停，等待用户输入一些文本。int()函数可以将字符串转为数字，而while循环可以有多种方式，也更加便利。

字典是一个较为复杂的数据结构，以键值对的形式存在，但是键和值的存储又是多样的，可以是列表，字典或其他数据类型。

列表是python中非常常见的数据结构，使用for循环进行列表的遍历，使用range函数可以非常方便的构建数值列表，列表自的切片功能也非常实用，使用列表中的一部分，还支持倒序切片。元组使用'[]'定义