橙子猿

简介 canal [kə'næl]，译意为水道/管道/沟渠，主要用途是基于 MySQL 数据库增量日志解析，提供增量数据订阅和消费早期阿里巴巴

简单需求： 向文件中定时新增日期数据,采集该文件, 通过自定义source拦截器给日期数据加上自己姓名作为前缀,输出到控制台。 分析： 需求很简单

在使用hive时难免会碰到hive的函数解决不了的操作，这时我们就可以开发UDF函数去解决复杂的问题。 udf函数分类： UDF : User-Defined Function （用户自定义函数）一进

我这里是有3台服务器，分别hostname为node01、node02、node03。 三台机器已经配置好了ssh。 zookeeper使用的是cdh5的zookeeper包，没有使用原生

安装完成后我们需要启动三个mongod的服务来做为复制集的三个节点，我们可以直接打开cmd，使用mongod来根据不同的配置启动服务。例如：参考如下四张图，由于我安装的磁盘足够存放mongodb的数据

废话不多说，我们直接使用一个使用例子来进行说明他们的功能 例如：将periodical_code表中的p_year、p_year_stage两个字段连接成json字符串，然后分组收集到array里

Client是操作HBase集群的入口，对于管理类的操作，如表的增、删、改操纵，Client通过RPC与HMaster通信完成，对于表数据的读写操作，Client通过RPC与RegionServer

安装三台linux服务器 1. 安装VMWare VMWare虚拟机软件是一个“虚拟PC”软件，它使你可以在一台机器上同时运行多个Windows、

满足三点，可以保证端到端的Exactly Once 开启checkpoint source支持数据重发 sink端幂等性写入、事务性写入。我们常使用事务性写入 分布式快照机制（checkpoint）