aibigdata

本文已参与「新人创作礼」活动，一起开启掘金创作之路。 问题现象： 运维k8s过程当中，当执行delete操作时发现pod一直处于terminating状态 问题排查 执行：kubectl get AP

本文已参与「新人创作礼」活动，一起开启掘金创作之路。 背景 用户反馈一个问题，在使用K8S当中删除任务重建任务会提示资源清理不成功，赶紧登陆服务器一通操作 kubectl发现Pod一直处于Termin

本文已参与「新人创作礼」活动，一起开启掘金创作之路。 当前的应用系统，通常数据量比较大、数据复杂度比较高以及数据快速多变，可以把这样的系统称之为数据密集型系统，数据密集型系统通常基于不同的模块组件进行

本文已参与「新人创作礼」活动，一起开启掘金创作之路。 大数据应用方向 大数据搜索 大数据的起源就是来源于搜索，提到大数据搜索，作为全球最大的搜索引擎google，同时也是我们公认的大数据的鼻祖。存储着

本文已参与「新人创作礼」活动，一起开启掘金创作之路。 背景 我们常说的大数据技术，大致主要起源于Google在2004年前后发表的三篇论文，大数据概念流行之前其实数据处理早就存在，每个公司或者个人都有

本文已参与「新人创作礼」活动，一起开启掘金创作之路。 背景 对于一个企业大数据应用来说，搞定了大数据存储基本上就解决了大数据基础架构中最重要的问题。Google 三驾马车的第一驾是GFS，Hadoop

本文已参与「新人创作礼」活动，一起开启掘金创作之路。 背景介绍： 一年多以前从腾讯出来，换了家企业，涉及到一些安装运维工作，其中大数据AI产品需要落地，在大厂腾都有现成的可以用，来到这都没有K8S集群

本文已参与「新人创作礼」活动，一起开启掘金创作之路。 问题背景： 业务在使用ES集群读取ES数据，如果同时向ES集群写任务时，会遇到RT涨的情况，会出现一些抖动，尤其是在计算框架大量增加并发度像ES集

本文已参与「新人创作礼」活动，一起开启掘金创作之路。 前言 由Uber公司的开发的Horovod架构，是一个集成了多个深度学习的统一平台，提供分布式训练效率的同事，让深度学习分布式训练变得更方便。\