陈惜时

也许你还在工位上焦虑着人工智能会不会替代自己; 也许你还在为一眼看不到头的加班而苦恼; 也许你还在为夜晚拉长了的背影而感到孤独无助。 那么今天推荐的这个开源项目或许值得你一...

Hive 一个常用的大数据组件，影响它的性能的从来都不是因为数据量过大的问题，而是数据倾斜，冗余，Job 和 IO 过多，MapReduce 分配不合理···等...

Hive中如何处理JSON格式数据 Hive 处理json数据总体来说有三个办法： 使用内建的函数get_json_object、json_tuple 使用自定义的UDF(...

一、概念 简介 Hive 中的表对应为HDFS上的指定目录，在查询数据时候，默认会对全表进行扫描，这样时间和性能的消耗都非常大。 分区表实际上就是对应一个HDFS文件系统上...

本文主要围绕hive的DDL操作和DML操作进行讲解。主要包括以下几个方面： 比如按照name属性分为3个桶，就是对name属性值的hash值对3取摸，按照取模结果对数据分...

本文主要围绕hive的高级操作进行讲解。主要包括以下几个方面。 1. Hive表的数据压缩 On a single core of a Core i7 processor ...

通过手机号查找微博账号的基本原理： 数据库匹配：现实中存在一个数据库，其中存储了手机号与微博账号ID的对应关系。这个数据库可能是通过各种方式收集并建立的，例如用户在某些服务...

Kafka、Flink和Druid一起使用时，可以创建一个实时数据架构，减少这些等待时间。在这篇文章中，我们将探讨如何利用Kafka、Flink、Druid实现广泛的实时数...

成功上岸字节！分享一些 Idea！给你新的面试思路，助力金九银十斩获各路大厂Offer～ 面试 = 40% 八股 + 30% 算法题 + 20% 项目经验 + 10% Id...

1. 什么是数据脱敏 1.1 数据脱敏的定义 数据脱敏百度百科中是这样定义的： 数据脱敏，指对某些敏感信息通过脱敏规则进行数据的变形，实现敏感隐私数据的可靠保护。这样就可以...

以上就是我对于处于“迷茫期”的一些大学生朋友的一点点个人的拙见，也是我个人的一些自省，与君共勉之......

💯大数据开发笔记系列： 1️⃣大数据开发笔记（一）：HDFS介绍 2️⃣大数据开发笔记（二）：Yarn分布式集群操作系统 3️⃣大数据开发笔记（三）：Mapreduce ...

我是 javapub，一名 Markdown 程序员从👨‍💻，八股文种子选手。 《面试1v1》 连载中... 面试官： 嗨，欢迎来到我们的面试！今天我们要聊一聊Kafk...