有猫病1

赞

7

|

搜索文章

亿级数据去重之布隆过滤器

标题很唬人吧，标题党就是本喵了哈哈哈哈哈哈哈。好了回归正题，在我们进行一些爬虫爬取数据的时候，如果保证去重呢，今天和大家聊一聊使用布隆过滤器去重。布隆过滤器（Bloom Filter）是1970年由布隆提出的。它实际上是一个很长的二进制向量和一系列随机映射函数。布隆过滤器可以…

6年前
7.7k
34
11

get和post的区别？

get参数有长度限制（受限于url长度，具体的数值取决于浏览器和服务器的限制，最长2048字节），而post无限制。 get请求的数据会附加在url之，以 " ？ "分割url和传输数据，多个参数用 "&"连接，而post请求会把请求的数据放在http请求体中。 get是明文…

6年前
19k
146
34

个人成就

文章被点赞 180

文章被阅读 26,747

加入于

2018-12-05