kafka
3篇文章 · 0订阅
  • Kafka 里面的信息是如何被消费的？
    作为一个爬虫工程师，Kafka 对你而言就是一个消息队列，你只需要掌握如何向里面写入数据，以及如何读取数据就可以m'ys'q作为一个爬虫工程师，Kafka 对你而言就是一个消息队列，你只需要掌握如何向里面写入数据，以及如何读取数据就何读取就可以可了。 本文，以及接下来的几篇针对…
    Kafka
  • 为什么每一个爬虫工程师都应该学习 Kafka
    这篇文章不会涉及到Kafka 的具体操作，而是告诉你 Kafka 是什么，以及它能在爬虫开发中扮演什么重要角色。 再来看看统计关键词的功能，这个功能背后有一个网页，会实时显示抓取数据量的变化情况，可以显示每分钟、每小时的某个关键词的抓取量。 最后一个需求，对微博数据进行情感分析…
    Python Kafka
  • 如何使用Python读写Kafka？
    关于Kafka的第三篇文章，我们来讲讲如何使用Python读写Kafka。这一篇文章里面，我们要使用的一个第三方库叫做kafka-python。大家可以使用pip或者pipenv安装它。下面两种安装方案，任选其一即可。 这篇文章，我们将会使用最短的代码来实现一个读、写Kafka…
    Python Kafka