踩坑&问题排查经历总结

通过curl上传文件 curl是linux系统中常用的数据传输命令，可以支持DICT, FILE, FTP, FTPS, GOPHER, GOPHERS, HTTP, HTTPS...等各种协议，通常

首先简单介绍下异常服务的背景。服务的背景可以概括为是一个消息队列的消费端服务，订阅上游消息队列的信息后，在本服务中对信息进行加工最后入库，如下图虚线中的部分。 服务整体是 分布式 部署的，有若干个分布式部署的实例，如图共三个。每个实例负责承包消费一部分 partition，对于…

笔者要执行一批刷数据的操作，需要从MySQL数据库中读出部分数据，然后进行一些加工处理，最后生成.sql的update语句文件，给db执行。 笔者使用的DB是根据userid进行了32分库，一开始出于实现简单的角度考量，使用了简单的单进程单线程顺序查询32分库的数据，但是数据量…

笔者在处理一项刷数据的工作，过程是将数据源A的数据经过一些调整和计算后存入到数据源B，整个过程大致如下图所示。 在执行步骤二的时候首先是出现了java.lang.OutOfMemoryError: Java heap space错误，错误的原因很明显是JVM堆空间不足，这时统计…

简单介绍下我们服务的背景，我们的服务是一个使用类似dubbo的RPC框架以及若干Spring全家桶组合起来的微服务架构，大致结构可以参考下图。 Java服务使用的是CMS的垃圾回收器。 普通CMS老年代回收过程如下图所示。 止损方式很简单，当然就是重启这个应用，在重启的时候应用…