获得徽章 0
动态
文章
专栏
沸点
收藏集
关注
作品
赞
17
赞
17
返回
|
搜索文章
海豚调度的头像
海豚调度
@白鲸开源科技有限公司
·
9月前

基于海豚调度功能开发——推送下游系统数据库连接信息批量修改方案与实现

## 功能需求背景 由于信创（信息技术应用创新产业）改造要求，上个月已将从[数据仓库](https://zhida.zhihu.com/search?content_id=...
评论
海豚调度的头像
海豚调度
@白鲸开源科技有限公司
·
9月前

作业帮基于 Apache DolphinScheduler 3_0_0 的缺陷修复与优化

文|作业帮大数据团队（阮文俊、孙建业） ## 背 景 基于 Apache DolphinScheduler （以下简称DolphinScheduler）搭建的 UDA 任务...
评论
海豚调度的头像
海豚调度
@白鲸开源科技有限公司
·
10月前

Apache DolphinScheduler 限制秒级别的定时调度

## 背景 Apache DolphinScheduler 定时任务配置采用的 7 位 Crontab 表达式，分别对应`秒、分、时、月天、月、周天、年`。 在团队日常开发...
评论
海豚调度的头像
海豚调度
@白鲸开源科技有限公司
·
10月前

基于 Apache Dolphinscheduler3.1.9中的Task 处理流程解析

实现一个调度任务，可能很简单。但是如何让工作流下的任务跑得更好、更快、更稳定、更具有扩展性，同时可视化，是值得我们去思考得问题。 Apache DolphinSchedu...
评论
海豚调度的头像
海豚调度
@白鲸开源科技有限公司
·
10月前

【技巧帖】 DolphinScheduler 任务数据清理与备份策略，确保页面不卡顿

## 问题描述 由于 Apache DolphinScheduler 长期运行，任务数量不断增加，相关任务数据主要存储在数据库中的 `t_ds_task_instance`...
评论
海豚调度的头像
海豚调度
@白鲸开源科技有限公司
·
10月前

新兴数据仓库设计与实践手册：从分层架构到实际应用（三）

本手册将分为三部分发布，以帮助读者逐步深入理解数据仓库的设计与实践。 - 第一部分介绍数据仓库的整体架构概述； - 第二部分深入讨论ETL在数仓中的应用理论，ODS层的具体...
评论
海豚调度的头像
海豚调度
@白鲸开源科技有限公司
·
10月前

新兴数据仓库设计与实践手册：从分层架构到实际应用（三）

本手册将分为三部分发布，以帮助读者逐步深入理解数据仓库的设计与实践。 - 第一部分介绍数据仓库的整体架构概述； - 第二部分深入讨论ETL在数仓中的应用理论，ODS层的具体...
评论
海豚调度的头像
海豚调度
@白鲸开源科技有限公司
·
10月前

占用磁盘100%？Apache DolphinScheduler 日志如何定时清理！

当 Apache DolphinScheduler 运行几个月后，大部分朋友会发现 `Logs` 下的运行日志越来越多，这时可以考虑清理下 `Logs/` 目录下的日志文件...
评论
海豚调度的头像
海豚调度
@白鲸开源科技有限公司
·
10月前

从ETL到DataOps：WhaleStudio替代Informatica，实现信创化升级

作者 | 白鲸开源 姜维 在数据集成和调度的领域，`Informatica`曾经是公认的权威工具。其强大的`ETL`功能、多年积累的市场经验，使其成为众多企业数据处理的核心...
评论
海豚调度的头像
海豚调度
@白鲸开源科技有限公司
·
10月前

大数据调度组件之Apache DolphinScheduler

Apache DolphinScheduler 是一个分布式易扩展的可视化 DAG 工作流任务调度系统。致力于解决数据处理流程中错综复杂的依赖关系，使调度系统在数据处理流程...
评论
海豚调度的头像
海豚调度
@白鲸开源科技有限公司
·
10月前

新兴数据仓库设计与实践手册：从分层架构到实际应用（二）

> 本手册将分为三部分发布，以帮助读者逐步深入理解数据仓库的设计与实践。 > - 第一部分介绍数据仓库的整体架构概述； > - 第二部分深入讨论ETL在数仓中的应用理论，O...
评论
海豚调度的头像
海豚调度
@白鲸开源科技有限公司
·
11月前

新兴数据仓库设计与实践手册：从分层架构到实际应用(一)

本手册将分为三部分发布，以帮助读者逐步深入理解数据仓库的设计与实践。 - 第一部分介绍数据仓库的整体架构概述； - 第二部分深入讨论ETL在数仓中的应用理论，ODS层的具体...
评论
海豚调度的头像
海豚调度
@白鲸开源科技有限公司
·
11月前

Whalestudio助力西南某商业银行数据中台建设 | 实践探索

在数字化转型的浪潮下，银行业对数据的依赖日益加深。为提升数据管理和应用水平，西南某城商行于2022年启动了数据中台建设，采用创新技术手段优化其数据服务体系。 本文将深入探讨...
评论
海豚调度的头像
海豚调度
@白鲸开源科技有限公司
·
11月前

Apache DolphinScheduler将上游Task执行结果传递给下游

## _**01**_ **背景** 公司的数据开发平台需要用到DolphinScheduler做任务调度，其中一个场景是：_上游任务执行结束后，需要将任务执行结果传递给...
评论
海豚调度的头像
海豚调度
@白鲸开源科技有限公司
·
11月前

手把手教你部署Apache DolphinScheduler —— 钉钉告警

在之前的文章中，我们已经介绍了Apache DolphinScheduler海豚调度的基本概念和工作流程，以及Shell任务和SQL任务的实践。感兴趣的朋友可以下滑到最下面...
评论
下一页
个人成就
文章被点赞 63
文章被阅读 55,128
掘力值 2,604
收藏集
0
关注标签
19
加入于