- 系统架构
数据接入层: 实时数据基于业务消息,通过flink清洗进行模型标准化,屏蔽差异。离线数据借用hive任务实现hive2mysql
配置层: 指标相关的配置,支持差异化
计算层: 包括实时计算、离线计算。
结果层: 重点说一下mysql,明细数据实现分表,单一数据借用分布式缓存实现高性能查询。
应用层: 经纪人权益、任务、运营后台、业务查询等
通用组件: 实现公共基础能力组件化,实现基础能力的全面复用,比如规则引擎、合规校验、人店基础库
- 技术点
实时特征
规则引擎
风控相关
数据接入层: 实时数据基于业务消息,通过flink清洗进行模型标准化,屏蔽差异。离线数据借用hive任务实现hive2mysql
配置层: 指标相关的配置,支持差异化
计算层: 包括实时计算、离线计算。
结果层: 重点说一下mysql,明细数据实现分表,单一数据借用分布式缓存实现高性能查询。
应用层: 经纪人权益、任务、运营后台、业务查询等
通用组件: 实现公共基础能力组件化,实现基础能力的全面复用,比如规则引擎、合规校验、人店基础库
实时特征
规则引擎
风控相关