首页
沸点
课程
数据标注
HOT
AI Coding
更多
直播
活动
APP
插件
直播
活动
APP
插件
搜索历史
清空
创作者中心
写文章
发沸点
写笔记
写代码
草稿箱
创作灵感
查看更多
登录
注册
lazysnail
掘友等级
获得徽章 0
动态
文章
专栏
沸点
收藏集
关注
作品
赞
7
文章 5
沸点 2
赞
7
返回
|
搜索文章
赞
文章( 5 )
沸点( 2 )
HDFS架构及原理
随着数据量的不断增大,文件的大小取决于单机存储的上限,这显然满足不了我们的需求。HDFS将大文件切块,部署到不同的机器节点上,完成分布式存储。 在分布式系统中,计算机节点放在机架上,每个机架存在很多节点,不同机架之间通过交换机通信,同一机架不同节点之间通过网络互连。 一台计算机…
JAVA堆外内存排查小结
这几天遇到一个比较奇怪的问题,觉得有必要和大家分享一下。我们的一个服务,运行在docker上,在某个版本之后,占用的内存开始增长,直到docker分配的内存上限,但是并不会OOM。版本的更改如下: 使用ps查看进程使用的内存和虚拟内存 ( Linux内存管理 )。除了虚拟内存比…
009-时间不同步导致Sentinel监控异常
在公司测试服务器调试ahas(Sentinel商业版)时,发现频发性无规律的出现Ahas控制台【监控详情】不显示,甚至应用直接消失的问题。 开始以为是非Spring boot应用的问题(因为另外一个产品线是spring boot的,测试没问题),反复翻看开源sentinel的w…
Hadoop 实验 - 熟悉常用的 HDFS 操作
理解 HDFS 在 Hadoop 体系结构中的角色。 熟练使用 HDFS 操作常用的 Shell 命令。 熟悉 HDFS 操作常用的 Java API。
hadoop 学习之路
在大数据时代,要想个性化实现业务的需求,还是得操纵各类的大数据软件,如:hadoop、hive、spark 等。笔者(阿里封神)混迹 Hadoop 圈子多年,经历了云梯 1、ODPS 等项目,目前 base 在 E-Mapreduce。在这,笔者尽可能梳理下 hadoop 的学习之路。
关注了
1
关注者
0
收藏集
1
关注标签
4
加入于
2018-09-12