seasonstar

上文简单的了解了airflow的概念与使用场景，今天就通过Docker安装一下Airflow,在使用中在深入的了解一下airflow有哪些具体的功能。 Airflow容器化部署 阿里云的宿主机环境：

编写DAG文件需要保证在集群每个节点都要同步,因为每个worker都是从本地进行读取执行的, 不像oozie那样上传到HDFS. scheduler仅仅是发送一条要执行哪个DAG下的哪个Task的命令到Queue Broker下, 然后worker再根据命令去指定指定的那个Ta…

公司有通过淘宝直播间短链接来爬取直播弹幕的需求, 奈何即便google上面也仅找到一个相关的话题, 还没有答案. 所以只能自食其力了. 下面我们来抽丝剥茧, 重现一下调研过程. 弹幕一般不是websocket就是socket. 我们打开dev tools过滤ws的请求即可看到w…

共 1867 字，读完需 4 分钟，速读需 1 分钟。本周收录的内容包含主流前端框架 React、Vue.js、Angular 的版本更新和周边扩展；CSS 方面，Grid 布局是值得关注的；开发效率方面，有 2 篇关于 Git、Webpack 的技巧。内容如下，请享用。技术动…

客户端基于 Electron, 由 Vue 配合 Vuex 实现实现渲染进程, 使用 Node 实现后台进程; 后端技术栈由 Node + Koa (提供 API 接口) 和 Python + Urllib + Beautiful (爬取数据) 与 MongoDB (存储数据) 构建; GitHub 地址为: https://github.com/HuQingyang/Luoo.qy

不吹不黑这大概是目前最好的网易云音乐客户端了吧，精力有限没有适配Windows和 Linux。目前 API 由 Binaryify/NeteaseCloudMusicApi 提供(可能会自己重造轮子，全姿势解锁)。

从去年开始，我参加了一些分享交流，也对外发过一些自己对工作所遇问题的思考。不少程序员加我好友咨询问题，几乎每个人问的问题都跟职业规划有关。这提醒了我，其实我自己也一直在思考同样的问题并尝试规划未来。于是想和大家分享一下自己在这方面的感悟。 本文仅从我自己的角度来剖析对程序员职业…

共 1947 字，读完需 4 分钟。本期有篇深度文章介绍 MobX，MobX 的原作者在 Medium 上有个人频道，写了至少 5 篇长文介绍自己的 React + MobX 心路。此外，React Amsterdam 技术大会已经闭幕，干货非常多，但需要你花较多时间去消化它的…

vue2+element 管理后台 集成解决方案 没有没做的，只要想不到的