尚硅谷

Scala 是一门以 java 虚拟机（JVM）为运行环境并将面向对象和函数式编程的最佳特性结合在一起的静态类型编程语言。scala 单作为一门语言来看， 非常的简洁高效，...

​ ​ 1．在默认情况下（set mapreduce.job.reduces=-1）,实际运行计算过程中reducer的数量会由所读取文件的大小来决定。文件默认大小是256...

​ 之前文章我们讲解了Apache Shiro的一些基础知识，今天我们会进行Shiro Realm实战以及对Shiro认证授权源码进行解读。 1. Shiro安全数据来源之...

​ 简介 之前我们都是通过shell来完成对数据库的各种操作的，在开发中大部分时候我们都需要通过程序来完成对数据库的操作。 而Mongoose就是一个让我们可以通过Node...

​ Spark任务调度机制论述 在生产环境下，Spark集群的部署方式一般为YARN-Cluster模式。 Driver线程主要是初始化SparkContext对象，准备运...

​组件自动扫描带来的问题 默认情况下，我们会使用 @SpringBootApplication 注解来自动获取应用的配置信息，但这样也会给应用带来一些副作用。使用这个注解后...

​ ​ ​ 一、Shuffle机制 1）Map方法之后Reduce方法之前这段处理过程叫Shuffle 2）Map方法之后，数据首先进入到分区方法，把数据标记好分区，然后把...

​ 启动MongoDB • 在C盘根目录下创建data文件夹，在data下 创建db文件夹 • 打开CMD命令行窗口，输入mongod • 32位系统第一次启动： – mo...

Apache Spark 是专为大规模数据处理而设计的快速通用的计算引擎，并且拥有Hadoop MapReduce所具有的优点；但不同于MapReduce的是——Job中间...

1. 程序代码 2. 锁的8个问题 (1) 标准访问，先打印短信还是邮件 (2) 停4秒在短信方法内，先打印短信还是邮件 (3) 普通的hello方法，是先打短信还是hel...

「本文正在参与技术专题征文Node.js进阶之路，点击查看详情」   Node的历史 2009年 瑞安·达尔（Ryan Dahl）在GitHub上发布node的最初版本  ...

Airflow是一个以编程方式编写，安排和监视工作流的平台。 使用Airflow将实用工作流任务编写的有向无环图(DAG)。一个流程计划程序在遵循指定的依赖项同时在一组工作...

一、简介 1、为什么我们要讲电商？ 因为就互联网平台来说，电商网站有很多典型的特征： 访问量大 数据量大 涉及的技术多 有一定的业务复杂性 涉及支付 考虑一定安全性 2、我...

项目采用ALS作为协同过滤算法，根据MongoDB中的用户评分表计算离线的用户商品推荐列表以及商品相似度矩阵。 通过ALS计算商品相似度矩阵，该矩阵用于查询当前商品的相似商...

fastdfs结构说明 一 、FastDFS--tracker安装 1  FastDFS安装环境 FastDFS是C语言开发，建议在linux上运行，本教程使用Centos...

阅读完需：约 19 分钟 ​ 一、分布式的业务场景 ​ 1 、如何高效完成各个分布式系统的协作 通过消息队列来达到异步解耦的效果，减少了程序之间的阻塞等待时间，降低了因为服...

调度器是 Flink 作业执行的核心组件，管理作业执行的所有相关过程，包括 JobGraph 到 ExecutionGraph 的转换、作业生命周期管理（作业的发布、取消、...

相关理解 1.1. SPA的理解 单页Web应用（single page web application，SPA）。 整个应用只有一个完整的页面。 点击页面中的链接不会刷新...