大数据
3篇文章 · 0订阅
  • 使用双异步后，从 191s 优化到 2s
    在开发中，我们经常会遇到这样的需求，将Excel的数据导入数据库中。 一般我会这样做： 通过POI读取需要导入的Excel； 以文件名为表名、列头为列名、并将数据拼接成sql；
    后端 Java 性能优化
    使用双异步后，从 191s 优化到 2s
  • 魅族大数据运维平台实践
    2013年底，我们开始实践大数据，并部署了测试集群。当时只有三个节点，因为我们起步比较晚，没有赶上Hadoop1.0，直接是用YARN来跑的大数据集群，而且默认就上了HA功能； 现在我们主要在做大数据安全方面，包括用户认证和授权。目前规模已达到近千台服务器，存储30PB，日增6…
    运维 安全 产品
  • 数据湖统一元数据与权限
    简介： 本文整理自阿里云数据湖构建与分析研发熊佳树在7月17日阿里云数据湖技术专场交流会的分享。 点击查看直播回放 一、元数据与权限背景介绍 开源元数据体系由来、演进及问题 开源大数据体系是指以 Ha
    后端