白鲸开源

数据仓库通过分层结构，使得每层数据都有特定的应用范围和职能，从而保证数据结构层次更清晰，结构更明确。使用时，数据表的层级划分能帮助用户快速理解和定位相关数据，减少查询复杂性...

本文将介绍 Apache DolphinScheduler 的 Worker 负载均衡，含加权随机、平滑轮询、线性负载（默认）三种算法，及配置修改、Worker 权重与预热...

今天和大家分享一个 简单但常见的 MySQL 到 MySQL 数据同步与合并场景案例，这个案例也是我在实际工作中遇到的问题，希望能抛砖引玉。...

当企业数据集成作业规模突破千万级，从 DataX、Sqoop 迁移到 Apache SeaTunnel 的过程往往布满荆棘——配置格式不兼容、字段映射易出错，每一步都可能成...

问题描述 DolphinScheduler 3.1.9 单机版（standalone）重启后，项目、流程定义等数据全部丢失。 问题原因 默认配置使用 H2 内存数据库，数据...

在降本增效的大背景下，我们重新审视了原有的数据集成架构。Spark 批任务虽然成熟，但在处理中小规模数据同步时显得“杀鸡用牛刀”。启动慢、资源占用高、开发周期长，成为团队效...

本人的是集群3.1.8因为3.1.8的一些漏洞才升级到3.3.1，虽然漏洞也可以不用升级解决，但是3.3.1版本有更详细的权限管控资源便也升级了；3.3.1版本机器启动方式...

本文为系列文章第三篇，详细剖析了数仓各层的设计规范，包含同步、存储、质量等核心要点。 最后一篇将在此框架内，依次剖析数仓各层的命名规范。...

Apache SeaTunnel 能够实现 MySQL 到 Doris 的全量和增量数据同步，同时也支持 SQL 级别的数据过滤。...

本文介绍基于Maven的SeaTunnel构建系统与分发基础架构。涵盖多模块项目如何构建、二进制分发包如何组装、连接器插件如何打包与发现，以及如何创建Docker镜像用于部...

在这个数字机遇无限的时代，开源不仅是技术创新的象征，更是全球商业扩张的关键驱动力。本次分享将带你走过开源项目从诞生到跨越国界、进入全球市场的完整历程。...

本文是 Apache DolphinScheduler 3.1.9 版本源码解读的第二篇：Worker Server 启动流程源码解读以及相关流程设计。结尾处附有相关流程图...

本文是 Apache DolphinScheduler 3.1.9 版本源码解读的第二篇：Worker Server 启动流程源码解读以及相关流程设计。结尾处附有相关流程图...

在现代数据驱动的企业中，工作流调度系统是数据管道（Data Pipeline）的“中枢神经”。从 ETL 任务到机器学习训练，从报表生成到实时监控，几乎所有关键业务都依赖于...

🎉亲爱的社区朋友们，数据集成领域的一场知识盛宴即将来袭！9 月 30 日下午 2 点，Apache SeaTunnel 社区精心策划的又一场线上 Meetup 将准时与大...

近期，Apache SeaTunnel 2.3.12 正式发版。这是继 2.3.11 之后的又一次迭代，本周期合并 82 个 PR，提供 9 项新特性、30+ 项功能增强、...

本文将深入探讨中控技术基于 Apache SeaTunnel 构建企业级数据采集框架的实践，重点分享集群高可用配置、性能调优、容错机制及数据质量监控等方面的具体思考与方案。...

北京白鲸开源科技有限公司凭借 「Agentic AI时代下的数据基础设施平台」（白鲸数据集成调度平台/WhaleStudio） 脱颖而出，荣获企业组二等奖。...

本文记录了在 Ubuntu 22.04 上部署 Apache DolphinScheduler（伪集群模式）的完整过程，涵盖环境准备、安装配置、数据库初始化、用户创建及服务...

本文就主要探讨如何在 ApacheDolphinScheduler 上更好地玩转 Workflow， 以帮助大家更好地管理数据处理任务。...