首页
AI Coding
数据标注
NEW
沸点
课程
直播
活动
APP
插件
搜索历史
清空
创作者中心
写文章
发沸点
写笔记
写代码
草稿箱
创作灵感
查看更多
登录
注册
Jeff_Shi
掘友等级
大数据开发工程师
|
上海汉得信息技术有限公司
获得徽章 0
动态
文章
专栏
沸点
收藏集
关注
作品
赞
0
文章 0
沸点 0
赞
0
返回
|
搜索文章
最新
热门
安装部署hzero遇到的问题
[ERROR] 'dependencies.dependency.version' for org.hzero:hzero-starter-core:jar is missing.
浅析微服务框架
你的整个应用程序将会被拆分成一个个功能独立的子系统,独立运行,系统与系统之间通过RPC接口通信。这样这些系统之间的耦合度大大降低,你的系统将非常容易扩展,团队协作效率提升了N个档次。 你的各个微服务将采用目前处于浪潮之巅的Docker来实现容器化部署,避免一切因环境引起的各种问…
关于Hadoop的思考及分析
Hadoop Common: The common utilities that support the other Hadoop modules. Hadoop Distributed File System (HDFS): A distributed file system…
往hdfs写数据无权限
org.apache.hadoop.security.UserGroupInformation有一个静态方法:getCurrentUser()。它会返回一个UserGroupInformation类的实例,如果subject为空,或者这个subject中与org.apache.…
hive on spark执行速度慢
因为task的启动数量是根据hdfs底层的block数量来定,在 block 数据量偏少的情况下,单个任务运行的时间就少,那么任务开启的开销很可能占据总开销的大量比例。现在因为block文件数量庞大,导致task启动数量巨大,过多的线程将导致排队延时的增加,严重影响sql的执行…
NoSql数据库
HBase 是Apache Hadoop 中的一个子项目,属于bigtable 的开源版本,所实现的语言为Java(故依赖 Java SDK)。HBase 依托于 Hadoop 的 HDFS(分布式文件系统)作为最基本存储基础单元。 在第3点的基础上可有效避免单点故障的发生。 …
java通过kerberos认证连接hdfs并写数
有两种方法:loginUserFromKeytab:调用checkTGTAndReloginFromKeytab来更新凭证,直接使用 keytab文件以及principal调用实现。
kettle流程设计问题
使用kettle设计的流程设计中,并行转串行时的节点直接卡住了,不执行后面的任务,但是任务却显示成功,类似这样,并且在修改流程设计也不能解决这个问题,最后只能使用子job的方式来解决,但是还是尽量一个
SQL基础
对于关系表,有个很重要的约束,就是任意两条记录不能重复。不能重复不是指两条记录不完全相同,而是指能够通过某个字段唯一区分出不同的记录 主键不要带有业务含义,而应该使用BIGINT自增或者GUID类型。主键也不应该允许NULL。可以使用多个列作为联合主键,但联合主键并不常用。 如…
linux笔记
数据的安全性: 因为每个分区槽的数据是分开的!所以,当你需要将某个分区槽的数据重整时,例如你要将计算机中 Windows 的 C 槽重新安装一次系统时, 可以将其他重要数据移动到其他分区槽,例如将邮件、桌面数据移 动到 D 槽去,那么 C 槽重灌系统并不会影响到 D 槽! 所以…
下一页
个人成就
文章被点赞
1
文章被阅读
13,575
掘力值
193
关注了
25
关注者
1
收藏集
0
关注标签
59
加入于
2019-01-14