Spark&Flink
2篇文章 · 0订阅
  • Spark ML的特征处理实战
    同时欢迎关注我们的公众号：OPPO_tech，与你分享OPPO前沿互联网技术及活动。 通常情况下，我们得到的数据中包含脏数据或者噪声。在模型训练前，需要对这些数据进行预处理，否则再好的模型也只能“garbage in，garbage out”。 数据预处理主要包括三部分，特征提…
    Spark 人工智能
  • Spark Streaming VS Flink
    本文从编程模型、任务调度、时间机制、Kafka 动态分区的感知、容错及处理语义、背压等几个方面对比 Spark Streaming 与 Flink，希望对有实时处理需求业务的企业端用户在框架选型有所启发。本文篇幅较长，建议先收藏～ Executor:负责执行 task，反馈执行…
    后端 Spark Kafka