codersu101778

Arrays.asList() 返回java.util.Arrays$ArrayList， 而不是ArrayList。Arrays$ArrayList和ArrayList都是继承AbstractList，remove，add等 方法在AbstractList中是默认throw …

task的parallelism可以在Flink的不同级别上指定。四种级别是：算子级别、执行环境（ExecutionEnvironment）级别、客户端（命令行）级别、配置文件（flink-conf.yaml）级别 运行环境的默认并发数可以通过调用setParallelism(…

--- # 主题列表：juejin, github, smartblue, cyanosis, channing-cyan, fancy, hydrogen, condensed-night-purp

数仓利器-Hive高频函数合集#掘金文章#https://juejin.cn/post/6871536791531782157

用tez做数据处理时，免不了要用union all来整合多个数据源的数据。但是如果最后一步是union all的话，就会生成多个子目录，这时用Spark就可能无法读取到子目录中的内容(取决于spark的配置)。 这个问题的原因是tez的union all是并行去做的，为了避免文…

![](https://p6-juejin.byteimg.com/tos-cn-i-k3u1fbpfcp/622e8f4f99184a5c987b8b0392bf5985~tplv-k3u1fbpf

通过文件系统的inode链接来产生的新的文件名，而不是产生新的文件，称为硬链接。 一般情况下，每个inode号码对应一个文件名，但是Linux允许多个文件名指向同一个inode号码。意味着可以使用不同的文件名访问相同的内容。 运行该命令以后，源文件与目标文件的inode号码相同…

blob转化stringselect*from(selectflowId,id,convert(datausingutf8)asurlfromnode)astwhereurllike'%educati

https://blog.csdn.net/program_developer/article/details/80867468