houseme

RustFS，一个基于 Rust 语言开发的高性能分布式对象存储系统，专为 AI、大数据和云原生工作负载设计，完全兼容 S3 协议，提供卓越的性能和安全性，助力企业快速搭建现代化数据基础设施。

引言 RMP（Rust MessagePack）是一个纯 Rust 实现的 MessagePack 序列化/反序列化库，以其高效、轻量和类型安全的特性，在高性能场景中表现出色。MessagePack

之前一直都是再用Python写爬虫，最近想体验下Golang写爬虫的感觉，所以就有了这个系列。我想要抓取的页面是豆瓣Top250页面，选择它的理由有3个: 豆瓣页面代码相对规范 豆瓣对爬虫爱好者相对更宽容 Top250页面简洁，很适合拿来练手 我们先看第一版的代码...

之前一直都是再用Python写爬虫，最近想体验下Golang写爬虫的感觉，所以就有了这个系列。我想要抓取的页面是豆瓣Top250页面，选择它的理由有3个: 我们先看第一版的代码。 我把URL请求的逻辑都放在了fetch函数中，里面做了一些异常处理。值得说的有2点： 在Heade…

在上篇文章里面我用Go写了一个爬虫，但是它的执行是串行的，效率很低，这篇文章把它改成并发的。由于这个程序只抓取10个页面，大概1s多就完成了，为了对比我们先给之前的doubanCrawler1.go加一点Sleep的代码，让它跑的「慢」些： 这样运行起来大体可以计算出来程序跑完…

在上篇文章里面我用Go写了一个爬虫，但是它的执行是串行的，效率很低，这篇文章把它改成并发的。由于这个程序只抓取10个页面，大概1s多就完成了，为了对比我们先给之前的doubanCrawler1.go加一点Sleep的代码，让它跑的「慢」些： 已经很慢了。接着我们开始让它变得更快…

在写爬虫的时候，想要对HTML内容进行选择和查找匹配时通常是不直接写正则表达式的：因为正则表达式可读性和可维护性比较差。用Python写爬虫这方面可选择的方案非常多了，其中有一个被开发者常用的库pyquery，而Golang也有对应的goquery，可以说goquery是jQu…

Python爬虫工程师有个常用的提取数据的库BeautifulSoup，而在Golang语言也有一个对应的库soup，由于我比较喜欢Python写爬虫所以自然而然的就想到了soup，这篇文章就是就来体验一下它。 soup是第三方库，需要手动安装： 就如之前的练习，我们是要定义头…

Python爬虫工程师有个常用的提取数据的库BeautifulSoup，而在Golang语言也有一个对应的库soup，由于我比较喜欢Python写爬虫所以自然而然的就想到了soup，这篇文章就是就来体验一下它。 就如之前的练习，我们是要定义头信息的，但是soup这个库只开放了G…