首页
AI Coding
NEW
沸点
课程
直播
活动
AI刷题
APP
插件
搜索历史
清空
创作者中心
写文章
发沸点
写笔记
写代码
草稿箱
创作灵感
查看更多
会员
登录
注册
智海观潮
掘友等级
微信公众号《智海观潮》
获得徽章 0
动态
文章
专栏
沸点
收藏集
关注
作品
赞
0
文章 0
沸点 0
赞
0
返回
|
搜索文章
最新
热门
linux文件句柄、单个用户进程数、swap分区、软限制、硬限制等系统调优
更多干货抢先看:大数据干货合集 无论对Spark集群,还是Hadoop集群等大数据相关的集群进行调优,对linux系统层面的调优都是必不可少的,这里主要介绍3种常用的调优: 1. linux文件句柄
Hive建表时开启事务机制导致insert失败: This command is not allowed on an ACID table.. with a n
更多干货抢先看:大数据干货合集 建表语句: 执行insert..values操作: 出现异常: 原因: Hive建表语句指定tblproperties('transactional'='true'),
学好Spark必须要掌握的Scala技术点
更多干货抢先看:大数据技术干货合集 前言 Scala是以JVM为运行环境的面向对象的函数式编程语言,它可以直接访问Java类库并且与Java框架进行交互操作。正如之前所介绍,Spark是用Scala语
HBase中Memstore存在的意义以及多列族引起的问题和设计
Memstore存在的意义 HBase在WAL机制开启的情况下,不考虑块缓存,数据日志会先写入HLog,然后进入Memstore,最后持久化到HFile中。HFile是存储在hdfs上的,WAL预写日
Hive数据导入HBase引起数据膨胀引发的思考
更多干货抢先看:大数据技术干货合集 最近朋友公司在做一些数据的迁移,主要是将一些Hive处理之后的热数据导入到HBase中,但是遇到了一个很奇怪的问题:同样的数据到了HBase中,所占空间竟增长了好几
Java面试与调优之JVM内存管理和垃圾回收
更多干货抢先看:大数据技术干货合集 无论对于Java程序员还是大数据研发人员,JVM是必须掌握的技能之一。既是面试中经常问的问题,也是在实际业务中对程序进行调优、排查类似于内存溢出、栈溢出、内存泄漏等
HBase高级特性、rowkey设计以及热点问题处理
更多干货抢先看:大数据技术干货合集 在阐述HBase高级特性和热点问题处理前,首先回顾一下HBase的特点:分布式、列存储、支持实时读写、存储的数据类型都是字节数组byte[],主要用来处理结构化和半
深入探讨HBASE
更多干货抢先看:大数据干货技术合集 HBASE基础 1. HBase简介 HBase是一个高可靠、高性能、面向列的,主要用于海量结构化和半结构化数据存储的分布式key-value存储系统。它基于Goo
Spark存储Parquet数据到Hive,对map、array、struct字段类型的处理
利用Spark往Hive中存储parquet数据,针对一些复杂数据类型如map、array、struct的处理遇到的问题? 为了更好的说明导致问题的原因、现象以及解决方案,首先看下述示例: 分别向t1
Spark中广播变量详解以及如何动态更新广播变量
【前言:Spark目前提供了两种有限定类型的共享变量:广播变量和累加器,今天主要介绍一下基于Spark2.4版本的广播变量。先前的版本比如Spark2.1之前的广播变量有两种实现:HttpBroadc
下一页
个人成就
文章被点赞
12
文章被阅读
16,899
掘力值
846
关注了
0
关注者
15
收藏集
0
关注标签
2
加入于
2020-04-17