首页
AI Coding
NEW
沸点
课程
直播
活动
AI刷题
APP
插件
搜索历史
清空
创作者中心
写文章
发沸点
写笔记
写代码
草稿箱
创作灵感
查看更多
会员
登录
注册
LeeRich
掘友等级
记录我的代码人生
iOS,Hadoop,Flink
获得徽章 0
动态
文章
专栏
沸点
收藏集
关注
作品
赞
5
文章 5
沸点 0
赞
5
返回
|
搜索文章
LeeRich
记录我的代码人生
·
5年前
关注
flink-Window Assingers(窗口分配器)中offset偏移量
指定完你的数据流是分组的还是非分组的之后,接下来你需要定义一个窗口分配器(window assigner),窗口分配器定义了元素如何分配到窗口中,这是通过在分组数据流中调用...
0
2
分享
LeeRich
记录我的代码人生
·
5年前
关注
Flink-kafka消费分区动态发现
Flink Kafka Consumer 支持发现动态创建的 Kafka 分区,并使用精准一次的语义保证去消耗它们。在初始检索分区元数据之后(即,当 Job 开始运行时)发...
0
评论
分享
LeeRich
记录我的代码人生
·
5年前
关注
Flink的Window窗口start和end时间
这里就得到getWindowStartWithOffset应该返回的时间为xxxxx0,这个时间作为window的start起始时间。...
0
评论
分享
LeeRich
记录我的代码人生
·
5年前
关注
机器学习K-means算法
同一聚类中的对象相似度较高,而不同聚类中的对象相似度较低。 通过迭代的方法,逐渐更新各聚类中心的值,直至得到最好的聚类结果。 b、在第K次迭代中,对任意一个样本,求其到c各...
0
评论
分享
LeeRich
记录我的代码人生
·
5年前
关注
机器学习-决策树
上面的图就是决策树,最终的结果是心仪或者不心仪。决策树算法以树形结构表示数据分类的结果 决策树属于也只能非参数学习算法、可以用于解决(多)分类问题,回归问题。 回归问题的结...
0
评论
分享
LeeRich
记录我的代码人生
·
5年前
关注
机器学习-逻辑回归
经典机器学习算法,他们最本质的区别是分类思想(预测y的表达式)不同,有的是基于概率模型,有的是动态规划,表象的区别就是最后的损失函数不同。 损失函数分为经验风险损失函数和结...
0
评论
分享
LeeRich
记录我的代码人生
·
5年前
关注
机器学习之梯度下降法
一. 前言:机器学习方法论 那么其实可以总结出关于“如何找到函数f(x)”的方法论。可以看作是机器学习的“三板斧”: 我们先把目光放在第三步上:How to pick th...
1
评论
分享
LeeRich
记录我的代码人生
·
5年前
关注
机器学习之线性回归算法
线性回归算法的作用是使用单一特征来预测响应值。是一种根据自变量X预测因变量Y的方法。假设两个变量是线性相关的,那么我们要找到一个线性函数,根据特征或自变量X来精确预测响应值...
0
评论
分享
LeeRich
记录我的代码人生
·
5年前
关注
HDFS NameNode 高可用实现意义
在 Hadoop 1.0 时代,NameNode 存在单点问题(SPOF,single point of failure ),一旦挂掉,整个 HDFS 都不能访问,而依赖它...
3
评论
分享
LeeRich
记录我的代码人生
·
5年前
关注
机器学习-简单的数据预处理和特征工程
我们发现,在量纲不同的情况下,以上的情况,不能反映样本中每一个特征的重要程度。这就需要数据归一化了。 一般来说,我们的解决方案是:把所有的数据都映射到同一个尺度(量纲)上。...
1
评论
分享
LeeRich
记录我的代码人生
·
5年前
关注
机器学习-如何评价模型的好坏
这个就需要进行数据的拆分,把原始数据集拆分为训练数据集和测试数据集。 1.我们使用鸢尾花数据集,该数据集是UCI数据库中常用数据集。我们可以直接加载数据集,并尝试对数据进行...
0
评论
分享
LeeRich
记录我的代码人生
·
5年前
关注
机器学习-用代码打开AI的大门
K最近邻(k-Nearest Neighbor,KNN)分类算法,是一个理论上比较成熟的方法,也是最简单的机器学习算法之一,有监督算法。该方法的思路是:如果一个样本在特征空...
0
评论
分享
LeeRich
记录我的代码人生
·
5年前
关注
kafka eagle安装之环境变量
由错误信息我们可以知道,这是KE_HOME的环境变量没有设置。 由以上发现,JAVA_HOME这个路径在env是有的,而KE_HOME在env却没有,那么就断定这里应该有问...
0
评论
分享
LeeRich
记录我的代码人生
·
5年前
关注
flink之window细节详解
今天有朋友提出了一个非常有意思的问题,window是否是提前创建好?有几个朋友都说会提前创建好,搞得我自己都差点怀疑人生。觉得有必要记录一下。...
0
评论
分享
LeeRich
记录我的代码人生
·
5年前
关注
Apache Flink:Keyed Window与Non-Keyed Window案列实操
Flink将Window分为两类,一类叫做Keyed Window,另一类叫做Non-Keyed Window。为了说明这两类Window的不同,我们看下Flink官网给出...
0
评论
分享
LeeRich
记录我的代码人生
·
5年前
关注
flink学习之process,apply
keyby后可直接调用processElement,且为每条数据设置定时器,得到每条数据也是按照输入顺序来。不能调用apply keyby后直接调用window,将转换为W...
0
评论
分享
LeeRich
记录我的代码人生
·
5年前
关注
flink bufferTime缓冲区
今天在调试代码,关于timeWindow的例子,发现把timeWindow的相关代码注释掉了,发送一个数据,也会延迟很久才会进行计算。 翻译成中文是缓存超时时间,冥冥之中感...
0
评论
分享
LeeRich
关注了标签
HDFS
记录我的代码人生
LeeRich
关注了标签
Hadoop
记录我的代码人生
LeeRich
关注了标签
Flink
记录我的代码人生
下一页
个人成就
文章被点赞
5
文章被阅读
35,022
掘力值
576
关注了
7
关注者
2
收藏集
1
关注标签
10
加入于
2018-01-02