大数据
3篇文章 · 0订阅
  • 百川终入海 ，一站式海量数据迁移工具 X2Doris 正式发布
    在大数据分析领域，Apache Doris 作为广受认可的开源实时数据仓库，已经在越来越多行业用户的真实业务场景中得到广泛应用，成为许多企业数据分析基础设施的重要基座。尤其在过去一年多的时间里，越来越
    数据库 大数据 数据分析
  • 大规格文件的上传优化
    第一步是结合项目背景，调研比较优化的解决方案。 文件上传失败是老生常谈的问题，常用方案是将一个大文件切片成多个小文件，并行请求接口进行上传，所有请求得到响应后，在服务器端合并所有的分片文件。当分片上传失败，可以在重新上传时进行判断，只上传上次失败的部分，减少用户的等待时间，缓解…
    后端 Node.js
    大规格文件的上传优化
  • Mysql 到 Hbase 数据如何实时同步，强大的 Streamsets 告诉你
    很多情况大数据集群需要获取业务数据，用于分析。通常有两种方式： 第一种可以是在业务中编写代码，将觉得需要发送的数据发送到消息队列，最终落地到大数据集群。 第二种则是通过数据同步的方式，将关系型数据同步到大数据集群，可以是存储在 hdfs 上，使用 hive 进行分析，或者是直接…
    数据库