大数据
5篇文章 · 0订阅
  • Spring Boot系列十七 Spring Boot 集成 websocket，使用RabbitMQ做为消息代理
    1. 概述 在上篇文章Spring Boot系列十六 WebSocket简介和spring boot集成简单消息代理中我们使用的消息代理是spring内置的简单消息代理，简单消息代理非常适合入门，但是只支持STOMP命令的子集（如不支持acks, receipts），依赖于消息…
    RabbitMQ Spring Boot WebSocket
  • Scrapy爬取二手房信息+可视化数据分析
    本篇介绍一个scrapy的实战爬虫项目，并对爬取信息进行简单的数据分析。目标是北京二手房信息，下面开始分析。 采用安居客网页信息作为二手房的信息来源。直接点击进入二手房信息的页面。 博主并没有采用分区域进行爬取，博主是直接进行全部爬取，然后循环下一页完成的。步骤很简单，如下： …
    数据分析 Scrapy 爬虫
  • Hadoop和大数据：60款顶级开源工具
    这回我们推出了最新的顶级开源大数据工具排行榜。这个领域最近方兴未艾，许多新项目纷纷启动。许多最知名的项目由Apache基金会管理，与Hadoop密切相关。请注意：本文不是要搞什么排名；相反，项目按类别加以介绍。与往常一样，要是你知道另外的开源大数据及/或Hadoop工具应该榜
    Hadoop 数据分析
  • Hadoop的RPC设计分析
    之前鼓捣Hbase的时候，觉得单机和伪分布式模式太low了，就在笔记本上用三个虚拟机搭建了一个“完全分布式”的Hbase环境(心疼破本子一秒钟)。刚好趁这个元旦假期，我就研究了一下Hadoop。 Hadoop也算是个巨无霸了，涉及了很多方面的功能。个人工作中有多个RPC cli…
    Hadoop Java