PiflowX

本文对 AI Agent 这一概念进行了较为全面的解读，让我们一同认识 AI Agent ，认清发展趋势，做好迎接未来的准备。...

场景 当要对保证某些可编辑字段的唯一性时，代码需要在插入和更新时都进行唯一性校验，这很繁琐。 因此想到采用将对于唯一性的校验直接交给数据库进行，通过数据库唯一索引实现。 但...

1.代码获取 关注公众号PiflowX，发送“源码”获取github地址。 2.后端本地开发 前提条件 Java1.8+ maven 项目编译 切换到dev-flow分支。...

Faker组件 组件说明 根据每列提供的Data Faker表达式生成模拟数据。 计算引擎 flink 有界性 count属性设置了便是有界的，否则为无界流。 组件分组 c...

TopN组件 组件说明 按列排序的N个最小值或最大值。 有界性 batch streaming 计算引擎 flink 组件分组 common 端口 Inport：默认端口 ...

PiflowX新增Apache Beam计算引擎。目前为止，PiflowX支持spark、flink和beam 3中计算引擎。...

OrderBy组件 组件说明 ORDER BY组件使结果行根据指定的表达式进行排序。 计算引擎 flink 组件分组 common 端口 Inport：默认端口 outpo...

使用FileWrite组件，可以将数据写入到flink支持的文件系统，比如本地文件系统或者hdfs....

FileRead组件可以读取指定路径的文件的内容，可以是本地路径，hdfs路径或者其他flink支持的文件系统的路径。...

这篇文章将演示如何基于PiflowX快速构建 MySQL和Postgres的流式ETL。本教程的演示都将在WEB画布中进行，只需拖拉拽，无需一行Java/Scala代码，也...

Postgres CDC连接器允许从PostgreSQL数据库读取快照数据和增量数据。示例演示了基于PiflowX构建MySQL和Postgres的Streaming ET...

OracleCdc组件 组件说明 Oracle CDC连接器允许从Oracle数据库读取快照数据和增量数据。 计算引擎 flink 组件分组 cdc 端口 Inport：默...

MysqlCdc组件 组件说明 MySQL CDC连接器允许从MySQL数据库读取快照数据和增量数据。 计算引擎 flink 组件分组 cdc 端口 Inport：默认端口...

为了流水线处理系统支持flink引擎，PiflowX应运而生，PiflowX基于Piflow二次开发（在此，向piflow作者和全体开发人员致敬！！！），对核心框架进行了重...

JDBCRead组件 组件说明 使用JDBC驱动向任意类型的关系型数据库读取数据。 计算引擎 flink 有界性 Scan Source: Bounded Lookup S...

JDBCWrite组件 组件说明 使用JDBC驱动向任意类型的关系型数据库写入数据。 计算引擎 flink 有界性 Sink: Batch Sink: Streaming ...