用户3662798420092

1.dify启动报错 设置docke镜像库为： { "builder": { "gc": { "defaultKeepStorage": "20GB", "enabled"...

1 前言 图数据结构，能够很自然地表征现实世界。比如用户、门店、骑手这些实体可以用图中的点来表示，用户到门店的消费行为、骑手给用户的送餐行为可以用图中的边来表示。使用图的方...

维表是数仓中的一个概念，维表中的维度属性是观察数据的角度，在建设离线数仓的时候，通常是将维表与事实表进行关联构建星型模型。在实时数仓中，同样也有维表与事实表的概念，其中事实...

1.数据类型 字符串:char(n),varchar(n),STRING(等价于 VARCHAR(2147483647)), 布尔型:BOOLEAN, 数字型:DECIMA...

1.所需包文件放置在lib目录下 -rw-r--r-- 1 root root 58005 Jul 16 17:02 flink-connector-clickhouse-...

一个典型的以图搜图技术架构应该分为三大部分：特征抽取、检索引擎、搜索结果排序。不同的特征可以有不同的检索方法，比如文本特征采用文本模糊搜索的方式，图像特征采用的是近似向量搜...

原文引用:http://www.qishunwang.net/news_show_18815.aspx...

检查点超时: execution.checkpointing.interval: 10min execution.checkpointing.timeout: 30min ...

1.基于内容推荐： 根据物品或内容的元数据，发现物品或内容的相关性，然后基于用户以前的喜好记录推荐给用户相似的物品，更适合“用户焦点比较集中”的使用场景，比如垂直领域的内容...

堆内存结构 heap区分为Young Gen（新生代）、老年代Old Gen（老年代），其中新生代被分为Eden Space（伊甸区）、 Survivor Space(幸存...

废话不多说，直接上主题。 1.第一步下载一个模拟器（推荐使用自带root的模拟器），我使用的是夜神模拟器 下载地址：https://www.yeshen.com/ 2.下载...

一、定期block全盘扫描，引起dn心跳超时而脱离集群 现象： hdfs有一个目录扫描机制，默认6小时会全盘扫描一次所有block，判断与内存里的那份blockMap是否一...

import math 启发距离, 当前点和目标点的启发距离; -- 就是简单的曼哈顿距离 def heuristic_distace(Neighbour_node,tar...

问题 比如说我们建了一个 topic，有三个 partition。生产者在写的时候，其实可以指定一个 key，比如说我们指定了某个订单 id 作为 key，那么这个订单相关...

一、经典公式 1）平均并发用户数为 C = nL/T 2）并发用户数峰值 C‘ = C + 3*根号C C是平均并发用户数，n是login session的数量，L是log...

本文分享主要是ClickHouse的数据导入方式，本文主要介绍如何使用Flink、Spark、Kafka、MySQL、Hive将数据导入ClickHouse，具体内容包括：...

列式存储 和数据压缩 数据压缩采用LZ4算法 2.向量和执行引擎 用到了cpu的simd(单条指令操作多条数据)，通过数据并行的方式提高效率 3.多样化表引擎 总共有20多...

解耦合。 异步处理 例如电商平台，秒杀活动。一般流程会分为：1: 风险控制、2：库存锁定、3：生成订单、4：短信通知、5：更新数据。 通过消息系统将秒杀活动业务拆分开，将不...

1.数据结构调优：设计合理的表和字段，避免较多的jOin,数据倾斜(空字段，热点数据等)； 2.sql 语句调优： 优化原则：尽早尽量过滤数据，减少每个阶段的数据量;减少j...

1.安装maven，修改settings，主要修改localRepository指向的maven仓库地址，以及mirror里面的url地址。（只需要如下配置即可，其余配置全...