一杯半盏

异常 经常有用户遇到这个问题： class ByteArrayDeserializer is not an instance of，本文分析了异常来源的来龙去脉，给出类型加...

AsyncIOExample Flink 的源码内有这么一个 AsyncIOExample 程序，非常好用，可以用来无限跑流。 用英文说就是 long running 或者...

直接报错: NoSuchMethodError: org.apache.hadoop.tracing.TraceUtils.wrapHadoopConf 可疑的Librar...

按照发生情况的情况进行分类总结，发现问题可以分为以下三类。 Spark 框架自身的问题 Hadoop 全家桶的问题 开发者使用的库的问题 已知问题 Hadoop-commo...

解决Flink作业找不到MRVersion类的问题 。并且借此机会从源码层面分析了 Flink on Yarn 的 Classpath 传递机制，该机制指明了 Flink ...

Flink 的指标非常多，同时由于参数配置的不正确，导致指标上报频率过快，PushGateway集群压力过大。 相关文章 如果有开发者在找限流、拦截指标的做法，可参考本专栏...

FlinkSQL 使用HiveCatalog，或者使用Hive方言，使用UDF等情况下报错： 详细场景参见 FLINK-24950 registerTemporaryFun...

flink客户端提交命令为 flink run, 如果客户端的 main 方法内部需要读取系统属性(System properties)，读取系统属性变量的位置有两种： 从...

使用了 Flink-Kafka-Connector（版本1.13.0），使用 FlinkKafkaConsumer 上报了 KafkaLag 指标，但是换成 KafkaSo...

Influxdb1.8在100个作业的情况下，内存峰值占用超过20GB，容器负载过高会触发重启，导致客户端无法上报。说明解决方案不够好，因此需要找到一种不重启作业，直接过滤...

前言 Flink 自带了一个SQLClient，截至目前Flink-1.13.0 [^1]，Flink还没有Flink SQL Gateway[^2]。 需求 由于需要在提...

报错记录 提交作业的时候，遇到一些坑，报错具有迷惑性。 413 Request Entity Too Large. Try to raise [rest.client.ma...

起因 由于近期研究了ElasticSearch的Connector，但是目前生产环境不需要此jar。 Flink社区的一些小伙伴交流的时候，发现有人在使用Flink Ses...

前言 本文的主要内容是介绍如何动态加载Flink作业的UDF。 Classloader 加载UDF一定是classLoader做的，而作业启动的过程中，App ClassL...

前言 FlinkSQL 和常见的SQL一样，也分为 DDL,DML,DQL,DCL。 本文的主要内容是探讨如何利用FlinkAPI 对多行SQL语句进行校验。 以下是几个例...

关键词：FlinkSQL HiveCatalog Kerberos， MetastoreClient，通过Thrift进行连接，而他不支持HADOOP_PROXY_USER...

问题 Flink通过Flink-hive-connector来连接Hive，但是连接Hive报错。 HiveMetaStoreClient连接HiveMetastore 使...

构建实时计算平台-FlinkSQL Client启动失败的问题笔记NoMatchingTableFactoryException: Could not find a sui...

Influxdb Java客户端 Influxdb 查看官方文档发现，客户端有： influx-client-java 与时俱进 创建连接 1.8版本如何访问 虽然Infl...

Influxdb 快速入门 从Docker启动 Influxdb 进入Influxdb的Client 配置Flink Metric Reporters,安装Chronogr...