abigalexy

一、反爬机制应对 1、IP封禁 问题：频繁请求触发目标网站的IP限制。 解决方案： 1）放慢爬取速度 (Sleep/Delay)：在请求之间加入随机时间间隔（如time.s...

一、Spring Cloud Alibaba微服务架构官网 阿里云官方文档：https://sca.aliyun.com/zh-cn/ GitHub 开源项目：https:...

Spring Cloud是基于Spring Boot构建的微服务开发框架，它通过集成一系列成熟的组件提供了微服务架构下的核心能力（如服务发现、配置管理、熔断降级等）。 一、...

数据采集（Ingestion）与接入、数据存储（Storage）与管理、数据计算与处理（Processing）、数据治理（Governance）与质量控制、数据分析（Ana...

一、设计原则 1、水平扩展：通过增加服务器而非提升单机性能来扩展 2、无状态化：服务节点不存储会话状态，便于横向扩展。 3、数据分片：通过Sharding分散数据库压力。 ...

一、Kafka高吞吐 1、 核心架构设计 顺序磁盘I/O： 磁盘顺序写入速度接近内存随机写入速度(300MB/s+) 批量处理： Producer批量发送、Broker批量...

Redis集群（Redis Cluster）是 Redis 官方提供的分布式解决方案，通过数据分片（Sharding）和高可用（High Availability）机制，实...

一、索引 一种数据结构（通常是B+树），存储字段值和对应记录的物理地址 （一）索引类型 普通索引： 最基本的索引类型 唯一索引： 索引列值必须唯一 主键索引： 特殊的唯一索...

树是一种重要的非线性数据结构，由节点（或顶点）和边组成，具有层次关系。 一、 链表-斜树（Skewed Tree） 链表是一种常见的基础数据结构，是一种线性表，但不像数组那...

一、Synchronized （一）特点 1、synchronized是Java中实现线程同步的关键字，它提供了互斥性和可见性保证 2、JVM层面锁（内置锁），基于Moni...

1、监控工具 命令行： jps、jstat、jmap、jstack、jcmd jstat：JVM统计监控工具 jmap：堆内存分析工具 jstack：线程堆栈分析工具 图形...

1、 指针碰撞（Bump the Pointer） 用于连续内存分配，适用于堆内存规整的场景（如复制算法后），通过移动指针分配内存。 原理： 维护一个指针：始终指向堆内存中...

1、标记-清除算法（Mark-Sweep）： 原理： 标记所有存活对象，然后清除未标记的垃圾对象。 标记阶段: 遍历所有GC Roots（如栈帧中的局部变量、静态变量等），...

新建虚拟机 自定义配置 稍后安装操作系统 配置操作系统，跟下载的操作系统镜像保持一致 自定义虚拟机名称和存储位置 默认值即可 虚拟机内存设置，根据自己物理机的内存配置，一般...

mysql参数调优完整配置示例 my.cnf 文件示例配置 备注：以上参数数值以实际情况为准，不可盲目照搬...

docker-compose.yml 备注： docker-compose.yml 所在目录下创建 .env 文件，写入读取的密码...

Nginx添加缓存调优示例，default.conf 文件配置示例，nginx.conf 文件配置示例...

解决方案： 1；增加网络宽带数值，不过这个成本较高； 2；采用CDN存储静态资源，提前缓存到离用户更近的节点，从而加速访问、降低延...