最近一直在迁移Flink相关的工程，期间也踩了些坑，checkpoint和反压是其中的一个。 敖丙太菜了，Flink都不会，只能我自己来了。看敖丙只能图一乐，学技术还是得看三歪 平时敖丙黑我都没啥水平，拿点简单的东西来就说我不会。我是敖丙的头号黑粉 今天来分享一下 Flink的…

前文提到，动态代理机制使用了反射，Spring 中的 AOP 由于使用了动态代理，所以也相当于使用了反射机制。那么，代理是什么？动态代理又是什么？动态代理中是如何使用反射的？全文脉络思维导图如下： 1. 常规编码方式 在学习代理之前，先回顾以下我们的常规编码方式：所有 inte…

众所周知，当我们使用线程来运行Runnable任务时，是不支持获取返回值的，因为Runnable接口的run()方法使用void修饰的，方法不支持返回值。而在很多场景下，我们一方面需要通过线程来异步执行任务，以便提升性能，另一方面还期望能获取到任务的执行结果。尤其是在RPC框架…

我们经常会用 Redis 做缓存，把一些数据放在上面，以减少数据的压力。 当数据量变大，并发量也增加的时候，把全部的缓存数据放在一台机器上就有些吃力了，毕竟一台机器的资源是有限的，通常我们会搭建集群环境，让数据尽量平均的放到每一台 Redis 中，比如我们的集群中有 4 台Re…

Hello我又来了，快年底了，作为一个有抱负的码农，我想给自己攒一个年终总结。自上上篇写了手动搭建Redis集群和MySQL主从同步(非Docker)和上篇写了动手实现MySQL读写分离and故障转移之后，索性这次把数据库中最核心的也是最难搞懂的内容，也就是索引，分享给大家。这…

绝大部分写业务的程序员，在实际开发中使用Redis的时候，只会SetValue和GetValue两个操作，对Redis整体缺乏一个认知。这里对Redis常见问题做一个总结，解决大家的知识盲点。1、为什

这篇文章不会涉及到Kafka 的具体操作，而是告诉你 Kafka 是什么，以及它能在爬虫开发中扮演什么重要角色。 再来看看统计关键词的功能，这个功能背后有一个网页，会实时显示抓取数据量的变化情况，可以显示每分钟、每小时的某个关键词的抓取量。 最后一个需求，对微博数据进行情感分析…

quartz是一个用java实现的开源任务调度框架，可以用来创建简单或者复杂的任务调度，并且可以提供许多企业级的功能，比如JTA以及集群等，是当今比较流行的JAVA任务调度框架。 1. 可以用来做什么 想每隔1小时，备份一下自己的各种资料。 那么总结起来就是，在一个有规律的时间…

最近需要写一个每天定点自动执行的定时任务，对于以前自己写小项目，可能会选择java自带的Timer类，但是对于公司中的项目，Timer类实现定时任务只能有一个后台线程执行任务，并且只能让程序按照某个频度执行，并不能在指定时间点执行。同时由于一般大型项目会有多个job分别需要在不…