首页
AI Coding
NEW
沸点
课程
直播
活动
AI刷题
APP
插件
搜索历史
清空
创作者中心
写文章
发沸点
写笔记
写代码
草稿箱
创作灵感
查看更多
会员
登录
注册
涤生大数据
掘友等级
大数据架构专家
大数据架构专家,擅长大数据开发,组件调优,集群运维架构。当前管理1500节点大数据集群,100PB+数据,爱好python,爬虫。微信公众号:涤生手记大数据
获得徽章 0
动态
文章
专栏
沸点
收藏集
关注
作品
赞
276
文章 276
沸点 0
赞
276
返回
|
搜索文章
赞
文章( 276 )
沸点( 0 )
Hbase:带你学习不一样的Hbase|概述|核心原理
Hbase是什么?学习东西的一手资料就是看官网,看hbase官网的背书:一个基于hadoop的分布式的,可扩展的,可以大量存储的数据库,主要应对大量数据的随机读写需求,实现海量数据的实时随机读写。 但是官网的表述往往是言简意赅,简洁客观性的陈述介绍。其...
策略模式——拒绝加班
持续创作,加速成长!这是我参与「掘金日新计划 · 6 月更文挑战」的第14天,点击查看活动详情 哈喽,大家好,我是一条。 今天来聊一下策略模式,比较简单且常用的设计模式。属于对象行为模式。 定义 官方
大数据开发必会!Yarn日志查看:Task容错机制,任务推测执行,计数器
背景:yarn的web界面是所有大数据开发都会或多或少查看的,比如任务运行失败,任务运行缓慢,查看详细任务运行进度,详细报错排查,debug等。但是实际从反馈来看,很多大数据开发对yarn界面的日志查看并不深入,对一些常见指标并不熟悉。下面以Hive/MapRedcue任务为例。...
Python常用模块 之 threading和Thread模块 第二阶段 线程通信及队列基操
1. 线程通信 1.1 互斥锁: 1.2 线程间全局变量的共享: 注意: 因为线程属于同一个进程,因此它
深入YARN系列3:剖析NodeManager架构,组件与生产应用
1.1.1.每个节点有一个NM守护进程,负责本节点的资源管理。其资源分配主要体现在Container模式上,根据RM分配资源。其次NM负责本地可用资源的监控,故障报告,以及Container的生命周期管理等。1.每个提交的应用程序都有一个AM的守护进程,客户端每使用YARN客户端...
深入YARN系列2:剖析ResourceManager的架构与组件使用
1.1.1.每个节点有一个NM守护进程,负责本节点的资源管理。其资源分配主要体现在Container模式上,根据RM分配资源。其次NM负责本地可用资源的监控,故障报告,以及Container的生命周期管理等。1.每个提交的应用程序都有一个AM的守护进程,客户端每使用YARN客户端...
代理模式
持续创作,加速成长!这是我参与「掘金日新计划 · 6 月更文挑战」的第10天,点击查看活动详情 哈喽,大家好,我是一条。 今天和大家聊一下代理模式,面试只要问到设计模式,代理模式是必问的。 废话不多说
下一页
个人成就
文章被点赞
1,563
文章被阅读
156,162
掘力值
4,838
关注了
9
关注者
85
收藏集
1
关注标签
6
加入于
2021-10-19