qData数据中台【商业版】v1.1.10 全新发布:多源数据集成全面升级,清洗规则体系再进化!

58 阅读3分钟

随着企业数据环境日益复杂,如何高效整合多源异构数据、实现灵活可视化编排与智能治理,成为数据中台的关键能力。
qData 作为新一代智能数据中台,本次 v1.1.10 版本 围绕「多源数据集成」「MongoDB 数据源接入」「清洗规则体系完善」等核心方向进行了重大升级,进一步强化系统的开放性与可维护性。


🧭 版本概述

qData 数据中台商业版 v1.1.10 聚焦于 多源数据融合、灵活任务编排与可视化交互体验 的全面优化:

  • 新增多表 Join 组件,支持复杂数据融合;
  • 新增 MongoDB 数据源与组件,打通文档型数据库通道;
  • 完善清洗规则体系,实现更直观、更高效的数据治理;
  • 同步优化日志机制、资产模块与前端性能。

本次更新不仅让 qData 在异构数据环境下的操作更流畅,更为企业构建高质量数据资产提供了坚实支撑。


🛠 主要更新内容

🔹 1. 数据集成能力再升级

  • 🧩 多表 Join 关联组件
    支持多表左/内连接、字段映射、条件配置与类型校验,轻松应对复杂数据融合场景。
  • 🍃 MongoDB 数据源接入
    新增 MongoDB 连接支持,包括连接测试、集合结构自动识别与字段映射。
  • ⚙️ MongoDB 输入输出组件
    支持集合级数据读取与写入(插入、更新、覆盖写),让文档型数据与结构化数据无缝衔接。
  • 💡 Java 脚本组件
    支持在数据集成流程中灵活编写逻辑,提升 ETL 流程的可定制性。
  • 🔄 多异构数据源联动
    实现 MySQL、DM8、Kingbase、Doris、MongoDB 等多端协同,满足跨源汇聚与多目标分发。
  • 🖱️ ETL 交互优化
    属性配置更流畅,建模体验更自然,复杂流程的操作效率显著提升。

🔹 2. 清洗规则体系完善

清洗规则体系实现前后端联动优化,配置更直观、执行更高效,新增与优化如下规则:

  • 字段值替换
  • 超长字段截取
  • 日期格式统一
  • 主键去重
  • 日期空值填充
  • 手机号格式统一

同时支持规则示例预览、参数校验与执行日志增强,让清洗任务更可控、更可追踪。


🔹 3. 系统与交互优化

  • 🧾 日志机制重构:数据质量任务日志结构更清晰,查询与定位更高效。
  • 📦 数据资产模块重构:目录结构与依赖优化,扩展性与维护性全面提升。
  • 🔍 资源检索性能优化:海量数据场景下响应速度显著提升。
  • ⚠️ 异常捕获增强:系统稳定性进一步提升,任务风险显著降低。
  • 🧭 ETL 页面连线体验优化:更精准的连线操作,更流畅的可视化设计体验。
  • 🖼️ 图片预览交互优化:点击任意空白处即可关闭,操作更自然。
  • 📋 作业管理新增描述字段:便于任务文档化与后期维护。
  • 前端加载与响应性能优化:整体交互体验再度提速。

🌟 版本亮点总结

模块主要增强点价值提升
数据集成MongoDB 支持 + 多表 Join实现多源异构数据融合
清洗规则六大清洗功能优化规则配置更清晰、执行更稳定
系统性能日志、异常、前端优化系统更稳定,体验更流畅
资产管理模块重构扩展性与维护性全面提升

💬 总结

qData 数据中台商业版 v1.1.10 的发布,标志着 qData 商业版在多源数据融合与数据治理领域迈上新台阶。
未来,qData 将持续围绕「数据智能化」「模型化治理」「低代码可视化」三大方向深耕,助力企业打造高效、可靠、智能的数据中台。

✨立即咨询 qData 数据中台商业版 v1.1.10,探索更智能的数据集成与治理之路。