Windows10 从零搭建 Hadoop/Hive 环境及 Hive 入门
1. Hadoop 概览Google 三篇论文（GFS -> HDFS，Map-Reduce -> MR，BigTable -> HBase）是 Hadoop 的思想之源。Hadoop 生态非常庞大，其最初两大核心是 HDFS 和 MR，分别负责存储和...
Hive metastore三种配置方式
Hive的meta数据支持以下三种存储方式，其中两种属于本地存储，一种为远端存储。远端存储比较适合生产环境。Hive官方wiki详细介绍了这三种方式，链接为：Hive Metastore。 一、本地der...
Informatica TO_BIGINT,TO_DECIMAL 转 字符串
Informatica PowerCenter中 TO_BIGINT,TO_DECIMAL这两个函数遇到字符串时 会自动返回0值 而不报错。TO_BIGINT( value )TO_BIGINT( IN_TAX, TRUE ) ...
impala 时间格式转换
from_unixtime(unix_timestamp(),'yyyyMMdd')， --=======================时间函数--======================= --当前时间戳now()current_timestamp() --当前时间戳相对于 linux epoch 的秒...
Impala String函数大全
Impala字符串函数Impala中字符串函数主要应用于 varchar、char、string类型，如果把varchar或者char类型的值传递给字符串函数，返回将是一个string类型的值 函数列表base64encode(string str...
hive update和delete报错Attempt to do update or delete using transaction manager
默认在hive中没有默认开启支持单条插入（update）、更新以及删除（delete）操作，需要自己配置。而在默认情况下，当用户如果使用update和delete操作时，会出现如下情况： hive> u...
group by 两个字段
group by 的简单说明: group by 一般和聚合函数一起使用才有意义,比如 count sum avg等 使用group by的两个要素: (1) 出现在select后面的字段 要么是是聚合函数中的,要么...
mybatis mybatis之foreach用法
在做mybatis的mapper.xml文件的时候，我们时常用到这样的情况：动态生成sql语句的查询条件，这个时候我们就可以用mybatis的foreach了 foreach元素的属性主要有item，index，collection，ope...
Hue集成Hadoop和Hive
一、环境准备 1、下载Hue：https://dl.dropboxusercontent.com/u/730827/hue/releases/3.12.0/hue-3.12.0.tgz 2、安装依赖 yum groupinstall -y "Development Tools" "Development Librari...
史上最详细的Hadoop环境搭建
GitChat 作者：鸣宇淳 原文： 史上最详细的Hadoop环境搭建 关注公众号：GitChat 技术杂谈，一本正经的讲技术 【不要错过文末活动哦】 前言 Hadoop在大数据技术体...