首页
AI Coding
数据标注
NEW
沸点
课程
直播
活动
APP
插件
搜索历史
清空
创作者中心
写文章
发沸点
写笔记
写代码
草稿箱
创作灵感
查看更多
登录
注册
大数据工具安装
大虾饺
创建于2021-07-31
订阅专栏
大数据工具安装
暂无订阅
共2篇文章
创建于2021-07-31
订阅专栏
默认顺序
默认顺序
最早发布
最新发布
spark streaming job hudi upsert 耗时比较久?有可能是commits的问题
问题描述 最近使用hudi 增量读的功能时,由于需要保留比较多的commits,因此设置比较的commits,假设spark steaming job 1分钟一个batch,保留一天增量读的commi
hive on spark - 各种 jar 找不到的解决方法
1.问题描述 最近需要用hive,并且配置hive on spark,然后运行的时候各种各样的类找不到报错,例如 2. 方案解决 检测 spark-env配置 设置 ${spark_dir}/conf