之前写了很多Redis相关的知识点，我又大概回头看了下，除了比较底层的东西没写很深之外，我基本上的点都提到过了，我相信如果只是为了应付面试应该是够了的，但是如果你想把它们真正的吸收纳为己用，还是需要大量的知识积累，和很多实际操作的。 就我自己而言Redis在开发过程中实在用得太…

首先一起来画个图，回顾一下Hadoop HDFS中的超大数据文件上传的原理。 其实说出来也很简单，比如有个十亿数据量级的超大数据文件，可能都达到TB级了，此时这个文件实在是太大了。 此时，HDFS客户端会给拆成很多block，一个block就128MB。 这个HDFS客户端你可…

概述分布式文件系统：Distributedfilesystem,DFS，又叫做网络文件系统：NetworkFileSystem。一种允许文件通过网络在多台主机上分享的文件系统，可让多机器上的多用户分享

上一篇文章《开放API网关实践(一)》中的接口设计提到timestamp和nonce两个参数的作用是用来防重放. 本文就重放攻击及其防御进行探讨. 先抛出两个问题: 打开浏览器的调试工具并访问一个网站, 在网络工具中找到一个请求并右键选择Replay. 如图: 上述的重放操作是…

SSO是公司一个已经存在了若干年的项目，后端采用SpringMVC、MyBatis，数据库使用MySQL，前端展示使用Freemark。今年，我们对该项目进行了一次革命性的改进，改造成SpringCloud架构，并且把前后端分离，前端采用Vue框架。 部署简单，SpringBo…

Hadoop是目前大数据领域最主流的一套技术体系，包含了多种技术。 包括HDFS（分布式文件系统），YARN（分布式资源调度系统），MapReduce（分布式计算系统），等等。 有些朋友可能听说过Hadoop，但是却不太清楚他到底是个什么东西，这篇文章就用大白话给各位阐述一下。…

这个中间件系统的本质是希望能够用分布式的方式来处理一些数据，但是具体的作用涉及到核心技术，所以这里不能直接说明。 但是他的核心思想，就是把数据分发到很多台机器上来处理，然后需要有一台机器来控制N多台机器的分布式处理，大概如下图所示。 那么既然是分布式的处理，就肯定涉及到在Mas…

在使用缓存之前，需要确认你的项目是否真的需要缓存。使用缓存会引入一定的技术复杂度，一般来说从两个方面来判断是否需要使用缓存： 如果你有某些应用需要消耗大量的 CPU 去计算，比如正则表达式；如果你使用正则表达式比较频繁，而它又占用了很多 CPU 的话，那你就应该使用缓存将正则表…