jumin1806

之前写了一篇python采用jdbc连接kerberos认证的hive，本文是采用LDAP用户名和密码的方式连接Oracle，并且提供一种自动关闭游标和数据库连接的方式，方便使用； 方法 具体代

最近在开发中遇到了一个场景，公司需要连接kerberos认证的Hive，正常的情况下直接用pyhive就可以了，网上可以找到许多相关的解决方案，但是我们在使用中发现了一个问题，pyhive使用的

在公司中，在使用python的过程中，我们经常会下载python的lib，而在下载lib的时候，公司的下载源有可能不存在，因此需要切换新的pip的下载源，这里讲述一下pip源的修改，以及应该注意的事项

目前在重新学习python，在学习python时重新学习到迭代器，这里对迭代器进行总结； 首先是一些基础的定义： （1）可迭代对象： 目前来说，数组，元组集合，字典，字符串都是可迭代对象，这些可迭代对

在用impala3版本时，出现了几个问题，以下是问题和解决方法： 1.impala执行出现异步的问题 问题：在impala3.0版本时，采用pyhive，impyla，以及hue这些python li

随着用sql计算业务逻辑越来越复杂，常用的hive内置函数无法满足复杂的sql计算，对于这种复杂的逻辑，需要自己去写udf函数，这里记录一下自己写udf函数的详细过程； 1.创建maven工程，在写h

最近在写flask的web程序，中间涉及到对日志的配置，这边记录以下使用的情况 我的代码使用的是python的logging的模块，python的logging模块和java的log4j有点相似； 基

yarn出现的原因和优点 在hadoop 1.0时，mapreduce作业执行的任务调度调度由jobtracker和tasktracker，这样增加了namenode的负担，并且，在tasktrack

HDFS是大数据的文件存储系统，它由3个组件组成，分别是client，namenode和datanode，以下是对这三个组件的介绍； HDFS Client HDFS Client的主要只能由如下几个