首页
AI Coding
数据标注
NEW
沸点
课程
直播
活动
APP
插件
搜索历史
清空
创作者中心
写文章
发沸点
写笔记
写代码
草稿箱
创作灵感
查看更多
登录
注册
brucezhao
掘友等级
获得徽章 0
动态
文章
专栏
沸点
收藏集
关注
作品
赞
0
文章 0
沸点 0
赞
0
返回
|
搜索文章
最新
热门
Trino Hive 连接器缓存
Planning 阶段 Coordinator 会连接 HMS 查询分区元数据,并调用存储系统 API (HDFS 或 OSS、S3等)获取对应的文件列表,Source 阶段从存储系统扫描。为了加快查
Kudu 读不平衡
Scanner 设置了副本选择策略为 CLOSEST_REPLICA,同一张表各个 tablet 大小以及在各个 Tserver 上的分布基本均衡,但依然存在读不均衡的情况。通过 scanner_by
Trino 内存管理及保护机制
Trino Memory Pool: general memory pool: user memory(join 时 build 侧的hash table / sort)+ system pool(算
Flink Kafka Connector 提交位点失败
现象:Flink 版本为 1.15.1,消费 Kafka 时提交位点失败,外部监控 Grafana 报警,但是由于 Flink 内部位点更新成功,而且 Checkpoint 成功,因此不影响正常的数据
Kudu TCMalloc Memory 泄漏
TCMalloc是谷歌开发的内存分配器。Kudu版本为 1.10.0,有 10GB 的 block cache,一直存在 top 命令看到的 kudu-tserver 进程占用内存虚高的情况。在 ku
Kudu 磁盘使用量虚高
问题:Kudu 版本为 1.10.0,data目录下有.data文件和.metadata文件,其中.data文件是真正的数据文件,.metadata文件是记录block位置等信息的文件。.metatd
Flink OSS FsStatebackend NoClassDefFoundError
jdk版本为11,使用 OSS 作为持久化状态后端,多个作业使用同一个 bucket,有时候其中几个作业(不同的 Flink 版本)会同时抛出以下异常: 这是因为首先 OSS 抛出了一个异常,但是由于
Kudu Leader Master Memory High
现象: table 及 tablet 较多,且一直在删除、创建基于时间的 tablet,导致 Leader Master Memory 一直在升高,每个月升高 3GB 左右。 原因: 对于删除的 ta
Trino Kudu Connector 增加自定义参数 kudu.split-size-bytes
背景:Split 是 Trino 处理数据的基本单位,每个 Driver 处理一个 Split。Hive 连接器支持hive.max-initial-split-size等 split 相关配置参数,
个人成就
文章被阅读
2,408
掘力值
48
关注了
0
关注者
0
收藏集
0
关注标签
2
加入于
2023-12-10