首页
AI Coding
NEW
沸点
课程
直播
活动
AI刷题
APP
插件
搜索历史
清空
创作者中心
写文章
发沸点
写笔记
写代码
草稿箱
创作灵感
查看更多
会员
登录
注册
大猪
掘友等级
获得徽章 0
动态
文章
专栏
沸点
收藏集
关注
作品
赞
8
文章 8
沸点 0
赞
8
返回
|
搜索文章
最新
热门
Selenium 人工智能操作工具
Selenium 就像真实用户所做的一样,Selenium 测试可以在 Windows、Linux 和 Macintosh上的 Internet Explorer、Chrome和 Firefox 中运行。其他测试工具都不能覆盖那么多的平台。咱们的 Selenium 和在浏览器中…
Spark+Hbase 亿级流量分析实战( 留存计算)
大猪 的习惯就是能上图就尽量不BB,好的图是会说话的,大猪 也在努力实现中。 大猪25通过某篇文章注册了简书帐号,26去浪去了。 这么简单的问题,我们的小伙伴肯定能答得上来。 莫慌,大家看看当前的时间是28号,Spark+Hbase 计算的是03-27的数据,因为在27号这天只…
Spark+Hbase 亿级流量分析实战( PV/UV )
不满足则 Sleep 30秒,可以自己控制Sleep范围。 计算完成更新指标结果并且更新指标计算时间,然后回到第 2 点。 从注释上看,整体思路还是比较清晰的。 果然一点都没错。 大猪 那 UV 是怎么实现咧?一个用户在今天来过第一次之后再来就不能重复计算了噢。 大猪 CACH…
Spark+Hbase 亿级流量分析实战(小巧高性能的ETL)
大猪 根据线上的生产环境一一把上面的功能重新分析给实现一下。 从第一点看还是比较简单的嘛?但是我们要结合上面的 5 个问题来看才行。 总结一句话就是:要实现一个高性能而且能随时重启继续工作的 loghub ETL 程序。 程序很精简,没有任何没用的功能在里面,线上的生产环境就应…
Spark+Hbase 亿级流量分析实战(日志存储设计)
日志将由SLB服务器进行负载到日志打点服务器。 NSA将作为日志收集中心进行存储,也可以使用rsync把节点上的日志同步到日志中心。 作为核心的ETL程序,将要对日志中心上所有节点的数据进行抽取转换加载。 上图中出现的Hbase比较好理解,但是为什么要出现Mysql?因为我们要…
Spark+Hbase 亿级流量分析实战(数据结构设计)
靠文章生存的大厂们简书/小红书/CSDN(PS:好吧你们仨记得给我广告费),对优秀的文章进行大数据分析的工作必不可以少了,本系列文章将会从关于文章的各个维度进行实战分析,这系列文章新手可借着踏入大数据研发的大门,至于大数据的大佬们可以一起来相互伤害,至少为什么取名为 ''百亿级…
个人成就
文章被点赞
24
文章被阅读
11,126
掘力值
252
关注了
0
关注者
32
收藏集
2
关注标签
5
加入于
2019-03-29