首页
沸点
课程
数据标注
HOT
AI Coding
更多
直播
活动
APP
插件
直播
活动
APP
插件
搜索历史
清空
创作者中心
写文章
发沸点
写笔记
写代码
草稿箱
创作灵感
查看更多
登录
注册
黄小虎
掘友等级
数据开发工程师
make long short~
获得徽章 0
动态
文章
专栏
沸点
收藏集
关注
作品
赞
9
文章 9
沸点 0
赞
9
返回
|
搜索文章
黄小虎
数据开发工程师
·
3年前
关注
图实时查询优化记录
一、查询需求: 如下图所示,每条线都代表一次由起点开始的查询,如图共三行,第一行为起始点,为业务给出输入,第二行为1阶查询结果,第三行为根据1阶查询结果进行查询的2阶结果,...
1
评论
分享
黄小虎
数据开发工程师
·
4年前
关注
关于图查询中的多线程查询优化记录
一、背景 在查询图数据库(nebula)过程中,我们往往需要具有拓扑关系的连续多次查询来作为业务的一次有效查询,比如我需要查询某点的一阶关系,获取到其一阶关系表,判断结果进...
1
评论
分享
黄小虎
数据开发工程师
·
4年前
关注
使用graphx进行图计算及相关事项梳理(持续更新)
一、前言 之前一直使用图数据库封装好的api进行图关系查询与计算,最近由于评估新业务,选择直接使用graphx进行计算,当然接下来也会将数据导入nebula进行对比看看。目...
1
评论
分享
黄小虎
关注了
GeekTech
数据开发工程师
黄小虎
数据开发工程师
·
4年前
关注
记arthas定位服务性能瓶颈及进行hotfix
一、起因 业务方反馈说图服务升级后gremlin查询性能较之前旧版本慢了五倍,特此记录下定位记录和思路。 二、思路和步骤 由于新旧版数据库此时并行在一起,尚未切量,故无法通...
5
2
分享
黄小虎
数据开发工程师
·
4年前
关注
使用spark 进行图数据按类型/全量导出实践
一、 背景 业务方需要经常按label类型导出数据进行分析,此前一直是将全部数据(千亿点边)导出再进行label的,效率很低。选择使用spark(scala+java)来进...
3
评论
分享
黄小虎
数据开发工程师
·
4年前
关注
浅谈业内常见图数据库以及适用的业务场景
前言目前市面上存在多款开源图数据库,以及各家厂商也进行了自研图数据库(大多闭源),以符合自己的定制化要求,如何选择呢?hugegraph,janusgraph,nebula...
2
1
分享
黄小虎
数据开发工程师
·
4年前
关注
基于图数据库huge的数据迁移实践
hugegraph经过一次大的版本升级(v0.9-0.11),其底层存储结构发生变化,新旧版本存储不兼容,社区提供了数据导出组件tools,将数据从hbase中导出为原始数...
3
1
分享
黄小虎
数据开发工程师
·
4年前
关注
火焰图分析性能瓶颈java
1. 火焰图: 火焰图用于分析热点代码占用大量cpu,从而导致服务性能下降的情况。如下图,自底向上为调用关系。上层宽度越宽标示当前函数cpu耗时越久,我们关注最宽的函数调用...
2
1
分享
黄小虎
数据开发工程师
·
4年前
关注
批量图数据bulkload实践
大量数据导入hugegraph库时,官方导入工具loader实际使用效率低,不适合亿级数据的导入。且loader通过原生接口进行数据导入,影响生产集群的稳定性,同时数据的持...
2
5
分享
黄小虎
数据开发工程师
·
5年前
关注
Mapreduce 详解之如何写mr
Mapreduce是一个分布式计算框架,支持少量代码实现海量数据并发处理程序。多个服务器同时进行计算,极大的提高了计算效率。 readFields方法反序列化了输入数据。(...
2
4
分享
黄小虎
数据开发工程师
·
5年前
关注
mapreduce源码分析
是一个分布式计算框架,支持少量代码实现海量数据并发处理程序。多个服务器同时进行计算,极大的提高了计算效率。 MapReduce无法在毫秒或者秒级时间内返回结果。 后一个应用...
2
评论
分享
黄小虎
数据开发工程师
·
5年前
关注
huge-hbase 0.9.2.8写数据源码分析/huge-Hbase 0.11新版变化
#####1. 插入点数据 2. 写处理通用数据整形 1. 插入Hbase 点表 2. column 最后一位。进行操作 与 byte. 3. 插入hbase 边表 1. ...
1
评论
分享
黄小虎
数据开发工程师
·
5年前
关注
图数据库学习
0x00. 前言 图的定义:图是由一组顶点和一组能够将两个顶点相连的边组成的:无向图、有向图、加权图、加权有向图。对于有向图而言,我们分别定义入度和出度,顶点的入度表示有多...
2
评论
分享
个人成就
文章被点赞
27
文章被阅读
11,717
掘力值
355
关注了
12
关注者
5
收藏集
0
关注标签
4
加入于
2020-07-13