【Spark 最佳实践】微软 Bing 搜索规模下的 SparkStreaming 应用

601 阅读1分钟
原文链接: click.aliyun.com
本讲义出自Kaarthik Sivashanmugam在Spark Summit EU上的演讲,主要介绍了在微软公司的Bing搜索每月上百万次搜索请求、每小时数十TB数据量、成千上万台机器组成数据中心、以及多个数据处理框架这样的规模下的Spark Streaming的应用。


c1585a8ca68212e1d11556b869368a832adacf72

1b34496ce81cdb5b5c5499f008ff27988d06f8dd

1260515383c5cdf316103108403d0263a80bf11d

8254a3f233347df37ee8cf2441746849a562b3fc

aa37aa5cc3ad33e319305773b8ffaa29e4f5b39d

d16523ee6ef188951caac37597e7f856406c7f3b

ebff6f9f4d6d8364748321cd863ef35e20795711

61db15a79ff0784820417e30689b5b005314c9ae

87abfa502e6524f77bc153e45c7d735843d58a97

c87db53830d46b2eb025d8121b3ead9ba5825fc5

8a3d29d38be88cfeda43dc2116132585e7829112

51a186522c94ef20fc918e415773f65b81e057d8

c2d9633a0af7af76a7064f0348ba1d2f974e6c3e

55fbf1ad48595059e4bf067f37eec00955a17b7d

7aadc030770591dc20ff2ff9cae0fd3b2ea20d38

1b85d3fd1bc6640446aa3f27d5314fbb12231216