知识整理

一、反爬机制应对 1、IP封禁 问题：频繁请求触发目标网站的IP限制。 解决方案： 1）放慢爬取速度 (Sleep/Delay)：在请求之间加入随机时间间隔（如time.sleep(random.un

一、Spring Cloud Alibaba微服务架构官网 阿里云官方文档：https://sca.aliyun.com/zh-cn/ GitHub 开源项目：https://github.com/a

Spring Cloud是基于Spring Boot构建的微服务开发框架，它通过集成一系列成熟的组件提供了微服务架构下的核心能力（如服务发现、配置管理、熔断降级等）。 一、核心组件 （一）服务注册与发

数据采集（Ingestion）与接入、数据存储（Storage）与管理、数据计算与处理（Processing）、数据治理（Governance）与质量控制、数据分析（Analysis）与挖掘、数据服务

一、设计原则 1、水平扩展：通过增加服务器而非提升单机性能来扩展 2、无状态化：服务节点不存储会话状态，便于横向扩展。 3、数据分片：通过Sharding分散数据库压力。 4、异步处理：使用消息队列削

Redis集群（Redis Cluster）是 Redis 官方提供的分布式解决方案，通过数据分片（Sharding）和高可用（High Availability）机制，实现水平扩展和故障自动转移。

一、索引 一种数据结构（通常是B+树），存储字段值和对应记录的物理地址 （一）索引类型 普通索引： 最基本的索引类型 唯一索引： 索引列值必须唯一 主键索引： 特殊的唯一索引，不允许NULL值 复合索

一、Synchronized （一）特点 1、synchronized是Java中实现线程同步的关键字，它提供了互斥性和可见性保证 2、JVM层面锁（内置锁），基于Monitor（对象监视器）

1、监控工具 命令行： jps、jstat、jmap、jstack、jcmd jstat：JVM统计监控工具 jmap：堆内存分析工具 jstack：线程堆栈分析工具 图形化： VisualVM、JC