数据社

在构建实时数仓的过程中，如何快速、正确的同步业务数据是最先面临的问题，本文主要讨论一下如何使用实时处理引擎Flink和数据湖Apache Iceberg两种技术，来解决业务数据实时入湖相关的问题

大家好，我是一哥，最近看到有号主整理的武汉和成都的互联网公司，一哥也想整理一下郑州的“互联网”公司，在郑州其实叫“IT公司”更合适，希望能给一线城市想回郑州的读者一些帮助。虽然郑州互联网公司不多，但是

大家好，我是一哥。今天跟大家聊聊程序员35岁以后的方向怎么选？ 程序员大都有一个品质：好学！技术专家这类人大多痴迷于程序，就像痴迷于游戏一样。把自己写的代码看成孩子一样，一直努力让自己的代码更完美，运行更高效，不允许有一点瑕疵。在项目期间，总能废寝忘食的加班，在调试完所有功能后…

按照官方提供的功能架构图理解，因为logi-kafka-manager的定位是kafka集群全方位管控系统，它以kafka集群为主体，封装和集成了kafka对外提供的用户API，，以kafka集群和topic资源为运营对象，面向应用系统用户（topic使用者）、kafka/管控…

关联规则挖掘可以让我们从数据集中发现项与项之间的关系，它在我们的生活中有很多应用场景，“购物篮分析”就是一个常见的场景，这个场景可以从消费者交易记录中发掘商品与商品之间的关联关系，进而通过商品捆绑销售或者相关推荐的方式带来更多的销售量。 支持度是个百分比，它指的是某个商品组合出…

其实不止是作为数据新人会面临这样的“困境”，很多数据工程师都有着这样的困惑，干了一两年感觉没意思，抱怨天天就是“提数”。一哥之前写过一篇文章《数仓工程师如何避免沦为“提数机”》，大家可以参考下。 面对这位小伙伴的困惑，我思考后给了她一些建议的，今天也系统的整理一下，给大家作为参…

作为一名程序员，要想成为一名出色的工程师，要从以下三点加强。 思考可以是技术架构上的设计优化，也可以是业务逻辑上的改进创新。在接到每一次任务时候，你要去想自己到底要解决一个什么问题？解决的价值是什么？目标是什么？有哪几种方案能够解决问题？要学会不断问自己为什么，而这也恰恰是我们…

在数据分析过程中，你是否有这种困惑呢？，如果有，那请你接着读完本文。 作为数据分析师，慢慢的会发现自己的很大一部分工作是让数据仓库工程师“提数”，但是数据仓库工程师可不止会“提数”。 我感觉对现在大数据平台建设了解最深入的应该是数据仓库工程师。因为他要接入数据，处理数据，存储数…

按照官方提供的功能架构图理解，因为logi-kafka-manager的定位是kafka集群全方位管控系统，它以kafka集群为主体，封装和集成了kafka对外提供的用户API，，以kafka集群和topic资源为运营对象，面向应用系统用户（topic使用者）、kafka/管控…