首页
AI Coding
NEW
沸点
课程
直播
活动
AI刷题
APP
插件
搜索历史
清空
创作者中心
写文章
发沸点
写笔记
写代码
草稿箱
创作灵感
查看更多
会员
登录
注册
1024点线面
掘友等级
大数据架构师
|
郑州
专注 Spark Linux JanusGraph ElasticSearch Hadoop ……
获得徽章 6
动态
文章
专栏
沸点
收藏集
关注
作品
赞
141
文章 118
沸点 23
赞
141
返回
|
搜索文章
赞
文章( 118 )
沸点( 23 )
ES集群规模规划
在搭建正式的生产集群之前,充分做好硬件和服务器配置以及集群规划是重中之重,磨刀不误砍柴工。 硬件配置推荐 内存 ES排序以及聚合都是高度需求内存的。单机(单节点)64GB
关于ES分片设置的6个建议
ElasticSearch并没有对分片数量和大小做硬性限制,但分片的设置对ES后期的顺畅使用又至关重要,那么最常见的2个问题: 纯干货 “我应该设置多少个分片?答:最大20
解决ES-Hive在开启Xpack下的数据互通问题
解决ES-Hive在开启Xpack下的数据互通问题 公共步骤 环境信息 Elasticsearch 7.3.x Hadoop 3.1.x Hive 3.1.x CentOS 7.4 (x86-64)
关于ES多数据目录
此前,我给ES配置多个数据目录(path.data)主要是为了增大存储上限,如果机器上配备有RAID卡直接使用存储卡做raid 0的单一大目录就十分便捷,无需考虑多目录的问题了。对测试遇到的问题试验及
Spark Streaming任务GC严重的问题排查优化
业务背景 业务代码本身是没有致命逻辑错误的,程序可以正常的启动和运行较长一段时间,如一周两周; 流计算任务,从kafka读取数据计算后写; 没有使用第三方缓存承接中间数据; 业务数据量大小中等,没有显
ES分词器安装方法
常规安装 说明 例如,下载的ik分词器压缩包,解压之后放到ElasticSearch安装路径下的plugins目录,之后重启es即可(文件名字随意,es会自动识别文件)。 安装过程 IK分词器下载地
Spark GraphX 图算法的理解
Spark GraphX是一个分布式图处理框架,基于 Pregel 接口实现了常用的图算法。包括 PageRank、SVDPlusPlus、TriangleCount
ElasticSearch的RBAC安全特性
当前大部分Elasticsearch集群的使用场景,多是内网部署,且不对外部提供相关服务。或者仅将Elasticsearch集群作为支撑业务的底层服务,不对公网开放9200等通信端口,只开放业务服务端
搭建个人知识库:Obsidian 1.0 正式发布
Obsidian是一款科研笔记和知识管理软件,最近obsidian终于抛掉beta版的帽子,开启了1.0时代。Obsidian是基于Markdown文件的本地知识管理软件,并且开发者承诺Obsidia
Spark3源码在IDEA中的编译步骤
Spark3源码编译-IDEA 之前可以在linux环境进行spark源码的修改和编译,没有在笔记本上走通过编译流程,记录遇到的问题和解决方案。在电脑上修改编译源码方便日常的调试使用,步骤如下。
下一页
个人成就
文章被点赞
502
文章被阅读
200,727
掘力值
4,488
关注了
32
关注者
1,156
收藏集
3
关注标签
22
加入于
2019-06-18