首页
AI Coding
NEW
沸点
课程
直播
活动
AI刷题
APP
插件
搜索历史
清空
创作者中心
写文章
发沸点
写笔记
写代码
草稿箱
创作灵感
查看更多
会员
登录
注册
确定删除此收藏集吗
删除后此收藏集将被移除
取消
确定删除
确定删除此文章吗
删除后此文章将被从当前收藏集中移除
取消
确定删除
编辑收藏集
名称:
描述:
0
/100
公开
当其他人关注此收藏集后不可再更改为隐私
隐私
仅自己可见此收藏集
取消
确定
大数据-存储
订阅
追逐如梦
更多收藏集
微信扫码分享
微信
新浪微博
QQ
29篇文章 · 0订阅
如何选择StarRocks表类型
StarRocks支持四种主要的表类型:明细表、聚合表、更新表和主键表。每种表类型的设计和适用场景不同,下面详细解析这四种表类型的特点、区别及使用场景。
第1章:DMP数据平台的基本概念和架构
1.背景介绍 1.1 背景介绍 数据管理平台(Data Management Platform,简称DMP)是一种用于收集、整理、分析和管理在线和离线数据的技术平台。DMP可以帮助企业更好地了解客户行
Java构建minio文件系统实现分片上传
下载minio 下载minio,下载地址在https://dl.min.io/server/minio/release/ minio特点 比如8块硬盘组成一个集合,当上传一个文件时会通过纠删码算法计算
SpringBoot通过OSS实现大文件分片上传
最近工作中有使用到OSS的分片上传API,整体流程就是前端将大文件进行分割,每个分片大小是5MB,分片个数是:(文件总大小 / 单个分片大小),前端多线程处理上传分片到后端,后端接收到分片后调用OSS验证是否存在接口校验之前有没有传输过(后端集群式部署的时候这个步骤非常关键),如...
一篇文章搞懂 Flink 的 watermark 机制
Flink 的 watermark 到底是什么?watermark有哪些类型?怎么生成?怎么处理数据?有没有代码样例?进来你都能看到
【云原生】Minio on k8s 讲解与实战操作
MinIO 是在 GNU Affero 通用公共许可证 v3.0 下发布的高性能对象存储。它与 Amazon S3 云存储服务 API 兼容。使用 MinIO 为机器学习、分析和应用程序数据工作负载构
【云原生】Flink on k8s 讲解与实战操作
一、概述 Flink官网:https://flink.apache.org/ 不同版本的文档:https://nightlies.apache.org/flink/ k8s on flink 官方文档
SparkSQL on K8s 在网易传媒的落地实践
随着云原生技术的发展和成熟,大数据基础设施积极拥抱云原生是业内发展的一大趋势。网易传媒在 2021 年成功将 SparkSQL 部署到了 K8s 集群,并实现与部分在线业务的混合部署,到目前已经稳定运
【云原生】Hadoop HA on k8s 环境部署
一、概述 非高可用 k8s 环境,可参考我这篇文章:【云原生】Hadoop on k8s 环境部署 高可用非 k8s 环境,可参考我这篇文章:大数据Hadoop之——Hadoop 3.3.4 HA(高
【云原生】Spark on k8s 讲解与实战操作
Apache Spark 是专为大规模数据处理而设计的快速通用的计算引擎。Spark是UC Berkeley AMP lab (加州大学伯克利分校的AMP实验室)所开源的类Hadoop MapRedu