汪胡佳

在多线程环境下，由于上下文的切换，数据可能出现不一致的情况或者数据被污染，我们需要保证数据安全，所以想到了加锁。 所谓的加锁机制呢，就是当一个线程访问该类的某个数据时，进行保护，其他线程不能进行访问，直到该线程读取完，其他线程才可使用。 单个服务去访问Redis的时候，确实因为…

这篇文章给大家聊聊Hadoop在部署了大规模的集群场景下，大量客户端并发写数据的时候，文件契约监控算法的性能优化。看懂这篇文章需要一些Hadoop的基础知识背景，还不太了解的兄弟，可以先看看之前的文章：兄弟，用大白话告诉你小白都能看懂的Hadoop架构原理。 明显不可以接受啊，…

日志是记录系统中各种问题信息的关键，也是一种常见的海量数据。日志平台为集团所有业务系统提供日志采集、消费、分析、存储、索引和查询的一站式日志服务。主要为了解决日志分散不方便查看、日志搜索操作复杂且效率低、业务异常无法及时发现等等问题。 随着有赞业务的发展与增长，每天都会产生百亿…

介绍了所有 JAVA 相关的知识。

则说明2个串联agent传递信息成功。 avroagent 配置文件配置项起始名称需要与服务启动 -name 名称相一致。 /home/hadoop/apps/flume/spoolDir 必须已经创建且具有用户读写权限。 此时监测到SpoolDirSourceAgent 可以…

本篇文章整理自袁晓亮 4 月 26 日在『ITA1024 大数据技术精英群』里的分享实录：基于 Flume+Kafka+ Elasticsearch+Storm 的海量日志实时分析平台 。

本来打算是准备着一支烟 一杯咖啡 一个bug写一天的，但是一来公司，运维就把昨天生产线的日志怼过来说，线上报错了。。。 在Rediss操作的时间报错了，然后网上各种百度，还真没找到具体的原因，不过自己定位了个大概。觉得有以下可能 第一就是因为它这个是循环set 然后用的redi…

生产者/消费者模式是为了解耦消费者和生产者而产生的，其原理非常地简单。总的来说就是生产者和消费者之间不直接通信，而是借助一个第三方(通常是阻塞队列)，第三方也成为临界资源,同一时间只允许一条线程对其进行操作。