user9230681779758

当前公司后端整体架构为：Spring Boot + Dubbo。由于早期项目进度等原因，对日志这块没有统一的规范，基本上是每个项目自己管自己的日志。这也对后面的问题排查带来了很大的困难，特别是那些需要同时或者多级调用Dubbo的服务场景，排查起来更加的困难。 现在需要实现从请求…

紧接上一篇，完成分析之后，就要具体的实现了。 service-a: 实现dubbo服务。 service-b: 实现web服务，并调用service-a实现的服务。 本例直接使用【阿里云·日志服务】进行数据存储和检索，使用Aliyun Log Logback Appender进…

为何豆瓣Top250如此受欢迎？因为它实在是太适合做爬虫入门练习了。 几乎没有任何反爬限制，要抓取的电影相关内容也全部都在源码中(没有异步加载，JS动态修改DOM等情况)。 本来计划抓取掘金热门文章来着，但是发现数据基本都是Ajax请求接口获取，所以还是以豆瓣为例吧。 因为第一…

通常，在第②步，是不会去执行页面中的JS代码的。有些网站，会使用Ajax异步加载一些数据，然后再渲染到页面上的；或者使用JS对页面Dom做一些修改。这样都会导致第②步请求的页面中缺少、甚至是没有目标数据。这就需在获取到网页数据后，执行页面中的JS代码了。 最早是使用phanto…

获取到了原始数据之后，下一步就是清洗入库。 因为是简单分析，所以只获取话题、用户、消息三块内容。具体如下： 数据库的话，使用MySQL。因为沸点内容msg_content中含有emoji表情，所以在建表时字符集编码需要使用utf8mb4。 接上文，我们已经将所有沸点数据保存至j…

在前两期，完成了对沸点数据的获取及简单分析。本期的主要目标是将让数据动起来，即间隔一定的时间后对数据进行更新。另一个就是对实时数据做些分析，比如今日数据、本周数据、本月数据的分析。 数据动起来，无非就是定时去获取数据并入库。 通过对沸点数据的分析，可以得到晚上12点以后到早晨5…

本文已参与好文召集令活动，点击查看：后端、大前端双赛道投稿，2万元奖池等你挑战！ 1 分析 我就想着，这东西我以前搞过呀，还能有啥难度不成。于是随便打开一个租房页面。 额(⊙o⊙)… 竟然换成了图片。

本文已参与好文召集令活动，点击查看：后端、大前端双赛道投稿，2万元奖池等你挑战！ 1 分析 原始图片已经获取完毕，然后对图片进行处理加工，再进行切割。作为机器学习原始素材。 因为图片是PNG格式的，一

一般做业务开发，不太容易有大量使用设计模式的场景。这里总结一下在业务开发中使用较为频繁的设计模式。当然语言为Java，基于Spring框架。