语落心生

目前doris作为冷库，在5亿数据读写的情况下，由于数据写入HDD的性能会出现下降，所以需要compaction将小文件按照版本合并，由随机写组织成顺序写. 这需要保证co...

一、RAG简介 大型语言模型（LLM）已经取得了显著的成功，尽管它们仍然面临重大的限制，特别是在特定领域或知识密集型任务中，尤其是在处理超出其训练数据或需要当前信息的查询时...

写这篇博客其实是想为大学时候的一段代码做个总结. 跨越许久的时光，这段代码不禁让人感到雀跃 先看一下效果 仓库地址: https://github.com/kaori-se...

背景 Smallpond 提供了两套 API（具体介绍见下文），一套是 High-level 的 Dataframe API，一套是 Low-level 的Logicalp...

一般是由于flink内存分配的策略以及回收不及时导致的 现在taskmanager当中开启 rest.flamegraph: true 配置JVM dashboard观察g...

背景   目前的报警指标分为以下三种: 单指标单工况报警 多指标联合报警(可能区分工况) 指标权重预计算(可以利用drools+kiesession) 多数据源联合告警的情...

背景 目前算法框架面临选型。需要知道在算法控制台需要支持窗口，水位线自定义调用算法插件等等需求. 由于目前面向从老到新框架的过渡阶段， 原先老的pyflink框架 目前以一...

我们项目组主要负责面向企业客户的业务系统，企业的需求往往是多样化且复杂的，对接不同企业时会有不同的定制化的业务模型和流程。我们在业务系统中使用表达式引擎，集中配置管理业务规...

上一篇当中 我们讲了RepicatedReplacingMergeTree的下推原理，这一篇从Clickhouse的具体优化案例出发，谈一谈使用上的习惯 1.大表在左，小表...

clickhouse目前用在实时BI后台，只要数据稳定落库了，出报表很快，临时查询也很快，在使用过程中，对它的一些优点和不足也是深有体会，这里总结一下，不能做到面面俱到，但...

背景 pyflink目前遇到性能瓶颈， 根因是因为在现有框架中flink流模式跑历史数据做验证 目前从MQ计算的特征，首先会在DAG图中，将每个测点到算法检测节点边拼接成一...

公司目前做OLAP用的ck 21.x, 顺便看看源码. 折腾了两个月结合网上的各种资料算是有点进展， 记录一下自己总结的 之后再补全文字讲解 流程图: https://ww...

一. lal 简介 lal是开源直播流媒体网络传输项目，主要由三部分组成： lalserver：流媒体转发服务器。类似于nginx-rtmp-module等服务，但支持更多...