大数据相关技术与应用

“携手创作，共同成长！这是我参与「掘金日新计划 · 8 月更文挑战」的第9天，点击查看活动详情” 生命无罪，健康万岁，我是laity。 我曾七次鄙视自己的灵魂： 第一次，当它本可进取时，却故作谦卑；

本文已参与「新人创作礼」活动，一起开启掘金创作之路。 以下操作都是基于你已经把hadoop集群搭建好了的情况下 Spark的运行模式 上面的部署安装属于(本地模式)Local部署 Spark的架构角色

本文已参与「新人创作礼」活动，一起开启掘金创作之路。 Hadoop入门教程 生命无罪，健康万岁，我是laity 分布式和集群的概念 分布式：多台机器，每台机器上部署不同组件。 集群：多台机器，每台机器

本文已参与「新人创作礼」活动，一起开启掘金创作之路。 一、HDFS的shell命令简介 ​ 我们都知道HDFS 是存取数据的分布式文件系统，那么对HDFS 的操作，就是文件系统的基本操作，比如文件的创

本文已参与「新人创作礼」活动，一起开启掘金创作之路。 keepalived两台机器同时出现vip问题 配置文件： 主：192.168.1.14 keepalived.conf 备：192.168.1.

本文已参与「新人创作礼」活动，一起开启掘金创作之路。 本文参考:Redis Cluster集群的搭建与实践 一、redis-cluster设计 Redis-Cluster采用无中心结构，每个节点保存数

本文已参与「新人创作礼」活动，一起开启掘金创作之路。 生命无罪，健康万岁，我是Laity。 UbuntuYUCentos7 Ubuntu安装 下载资源: http://www.ubuntu.com 下

本文已参与「新人创作礼」活动，一起开启掘金创作之路。 一、集群模式 1、单机模式 在zoo.cfg中只配置一个server.id就是单机模式了。 这种模式下，如果当前主机宕机，那么所有依赖于当前zoo

本文已参与「新人创作礼」活动，一起开启掘金创作之路。 前言 完全分布式就是把Hadoop核心组件分开部署到不同的服务器节点上运行。 通常，建议HDFS和YARN以单独的用户身份运行。在大多数安装中，H

本文已参与「新人创作礼」活动，一起开启掘金创作之路。 一、准备 1.1 软件版本 Ubuntu 16.04.6 (ubuntu-16.04.6-server-amd64.iso) JDK 1.8 (j

本文已参与「新人创作礼」活动，一起开启掘金创作之路。 一 Spark与hadoop Hadoop有两个核心模块，分布式存储模块HDFS和分布式计算模块Mapreduce Spark 支持多种编程语言，

本文已参与「新人创作礼」活动，一起开启掘金创作之路。 Hadoop和Spark联系与区别 谈到大数据，相信大家对Hadoop和Apache Spark这两个名字并不陌生。但我们往往对它们的理解只是提留