首页
AI Coding
数据标注
NEW
沸点
课程
直播
活动
APP
插件
搜索历史
清空
创作者中心
写文章
发沸点
写笔记
写代码
草稿箱
创作灵感
查看更多
登录
注册
丰泽
掘友等级
小程序员
|
大大大公司
获得徽章 0
动态
文章
专栏
沸点
收藏集
关注
作品
赞
16
文章 16
沸点 0
赞
16
返回
|
搜索文章
最新
热门
zookeeper集群,HA,单点故障
zookeeper中对用户的数据采用kv形式存储,只是zk有点特别。 接收Client的请求,如果为写请求,发送给Leader进行投票。
MapReducer基础案例整理
[数据去重]的最终目标是让[原始数据]中[出现次数][超过一次]的数据在输出文件中只出现一次。我们自然而然会想到将同一个数据的所有记录都交给一台reduce机器,无论这个数据出现多少次,只要在最终结果中输出一次就可以了。具体就是[reduce的输入]应该以数据作为key,而对v…
冒泡排序案例,鸡尾酒排序
概念:依次比较相邻的两个数,将小数放在前面,大数放在后面;第一趟可得到:将最大数放到最后一位,第二趟可得到:将第二大的数放到倒数第二位,如此下去,重复以上过程,直至最终完成排序。 由于排序过程中,总是将小数往前放,大数往后放,相当于气泡往上升,所以称作冒泡排序。 思路:用二重循…
Join关联联系案例
一、封装类:二、Mapper类:三、Reducer类:1.注意for循环迭代器Values的括号(引发错误:重复K,null)!2.注意将BeanUtils.写在if比较语句的里面!简便了bean.s
好友推荐案例
一、编写类二、测试类:三、编写类:注意Debug测试,防止数组下标越界错误!!!!四、测试类:
订单金额总和案例
一、创建一个封装类二、创建一个Mapper的编写类三、创建Reducer的编写类四、创建一个测试类Pom配置文件:
倒排索引创建案例
重点注意:1.FileSplitsplit=(FileSplit)context.getInputSplit();StringfileName=split.getPath().getName();//
序列化与反序列的理解
出处网址:
mapreduce统计排序,页面访问次数
1. 拆分,注意key和value的值 2. 不遍历时key可以取数组的下标 1. 注意reduce输入的value值 2. 运用ArrayList数组存K,V,new封装类然后List(别名).add添加 3. 重写MaperReduce的cleanup方法,运用Collec…
MapReduce提交集群运行,Yarn调度MR流程
产生不兼容问题时下载winunil.rar包解压覆盖配置文件到hadoop包bin目录下即可。 是一个资源调度系统,主要负责任务的维持和任务分配需要运行的资源。 1.与客户端进行交互,处理来自于客户端的请求,如查询应用的运行情况等。 3.管理NodeManager,例如kill…
下一页
个人成就
文章被点赞
8
文章被阅读
76,120
掘力值
1,542
关注了
12
关注者
8
收藏集
0
关注标签
17
加入于
2018-05-05