获得徽章 0
动态
文章
专栏
沸点
收藏集
关注
作品
赞
39
赞
39
返回
|
搜索文章
牛虻83
赞了这篇文章
有赞技术的头像
有赞技术
技术 @杭州有赞科技有限公司
·
6年前

SparkSQL 在有赞的实践

有赞数据平台从2017年上半年开始，逐步使用 SparkSQL 替代 Hive 执行离线任务，目前 SparkSQL 每天的运行作业数量5000个，占离线作业数目的55%，...
评论
牛虻83
赞了这篇文章
录信数软的头像
录信数软
@南京录信软件技术有限公司
·
4年前

Spark SQL踩坑经验总结及调优分享

Spark SQL是Spark生态系统中非常重要的组件， 能够利用 Spark 进行结构化的存储和操作。本文将围绕Spark内存泄露问题进行排查，并且给出具体的Spark调...
image
评论
牛虻83
赞了这篇文章
小段DSH12138的头像
小段DSH12138
大数据开发工程师
·
4年前

Hive表优化

Hive优化 本人太懒，好不容易画了个图表达，但是摘要需要50个字，就凑一凑，就凑一凑，就凑一凑，凑够了～...
评论
牛虻83的头像
牛虻83
关注了
王知无
牛虻83的头像
牛虻83
关注了
云祁
牛虻83的头像
牛虻83
关注了
大数据流动
牛虻83
赞了这篇文章
云祁的头像
云祁
公众号：云祁QI
·
4年前

大白话彻底搞懂 HBase Rowkey 设计和实现方式

HBase由于它存储和读写的高性能，在OLAP即时分析中发挥着重要的作用。而RowKey作为HBase的核心知识点，其设计势必会影响到数据在HBase中的分布，还会影响我们...
评论
牛虻83
赞了这篇文章
五分钟学大数据的头像
五分钟学大数据
大数据工程师 @公众号：五分钟学大数据
·
4年前

Hive解析Json数组超全讲解

在Hive中会有很多数据是用Json格式来存储的，如开发人员对APP上的页面进行埋点时，会将多个字段存放在一个json数组中，因此数据平台调用数据时，要对埋点数据进行解析。...
评论
牛虻83
赞了这篇文章
五分钟学大数据的头像
五分钟学大数据
大数据工程师 @公众号：五分钟学大数据
·
4年前

实战 | Hive 数据倾斜问题定位排查及解决

Hive 数据倾斜怎么发现，怎么定位，怎么解决 多数介绍数据倾斜的文章都是以大篇幅的理论为主，并没有给出具体的数据倾斜案例。当工作中遇到了倾斜问题，这些理论很难直接应用，导...
image
1
牛虻83的头像
牛虻83
关注了
五分钟学大数据
收藏集
5
关注标签
0
加入于