aibigdata

本文已参与「新人创作礼」活动，一起开启掘金创作之路。 大数据应用方向 大数据搜索 大数据的起源就是来源于搜索，提到大数据搜索，作为全球最大的搜索引擎google，同时也是我们公认的大数据的鼻祖。存储着

本文已参与「新人创作礼」活动，一起开启掘金创作之路。 背景 我们常说的大数据技术，大致主要起源于Google在2004年前后发表的三篇论文，大数据概念流行之前其实数据处理早就存在，每个公司或者个人都有

本文已参与「新人创作礼」活动，一起开启掘金创作之路。 背景 对于一个企业大数据应用来说，搞定了大数据存储基本上就解决了大数据基础架构中最重要的问题。Google 三驾马车的第一驾是GFS，Hadoop

本文已参与「新人创作礼」活动，一起开启掘金创作之路。 背景介绍： 一年多以前从腾讯出来，换了家企业，涉及到一些安装运维工作，其中大数据AI产品需要落地，在大厂腾都有现成的可以用，来到这都没有K8S集群

本文已参与「新人创作礼」活动，一起开启掘金创作之路。 问题背景： 业务在使用ES集群读取ES数据，如果同时向ES集群写任务时，会遇到RT涨的情况，会出现一些抖动，尤其是在计算框架大量增加并发度像ES集

本文已参与「新人创作礼」活动，一起开启掘金创作之路。 前言 由Uber公司的开发的Horovod架构，是一个集成了多个深度学习的统一平台，提供分布式训练效率的同事，让深度学习分布式训练变得更方便。\

本文已参与「新人创作礼」活动，一起开启掘金创作之路。 背景知识 WKT(Well-known text)是一种文本标记语言，用于表示矢量几何对象、空间参照系统及空间参照系统之间的转换。它的二进制表示方

本文已参与「新人创作礼」活动，一起开启掘金创作之路。 背景 spark是基于内存计算的通用大数据并行计算框架，是一个快速、通用可扩展的大数据分析引擎。它给出了大一统的软件开发栈，适用于不同场合的分布式

本文已参与「新人创作礼」活动，一起开启掘金创作之路。 背景介绍 首先介绍下Flink，一句话来介绍 就是 “Stateful Computations Over Streams”。四个基石：Check