linux Linux 命令神器:lsof

lsof是系统管理/安全的尤伯工具。将这个工具称之为lsof真实名副其实,因为它是指“列出打开文件(lists openfiles)”。而有一点要切记,在Unix中一切(包括网络套接口)都是文...

2022-12-10 313 阅读

spring springBoot多数据源配置,如mysql、hive,使用druid连接池

总共需要以下几个类: package com.config.datasource; import com.alibaba.druid.pool.DruidDataSource;import lombok.extern.slf4j.Slf4j;import org.springframework.beans.factory.annot...

2022-12-10 547 阅读

spring SpringBoot多数据源配置(hive/mysql)---自测可以,重点

简介在项目实践中,同一个项目可能需要整合多种数据源,把分散到各个数据库、数据表的数据都查询统计出来;SpringBoot有默认的数据源配置,本篇博客将整合SpringBoot多数据源配置,包括mysql...

2022-12-10 699 阅读

spring SpringBoot 集成 Impala + mybatis + druid

1. 获取依赖Impala的依赖在maven仓库下载不了,需要自己去官网下载: https://www.cloudera.com/downloads/connectors/impala/jdbc/2-6-3.html , 麻烦可直接去博主的GitHub项目中获取 2. 配置...

2022-12-10 752 阅读

kudu表数据的导入导出

一、kudu数据导出到文件例: impala-shell -l -u xuyi  --auth_creds_ok_in_clear  -q "select sms_content from warehouse.restart where eventId='filtrate_inbox_sms_delete_sm...

2022-12-10 475 阅读

Excel数据导入hive步骤

1. Excel导出逗号文件.csv 2. 将CSV文件导入到hive服务器制定目录 3. 转换编码格式 转换编码格式,在指定目录下执行如下命令:piconv -f gb2312 -t UTF-8 CompanyCode.txt  > &nbs...

2022-12-10 700 阅读

hive 从Excel中导入数据

拿到Excel表后将数据保留,其他的乱七八糟都删掉,然后另存为txt格式的文本,用nodepad++将文本转换为UTF-8编码,此处命名为cityprovince.txt 将cityprovince.txt传入操作的Linux环境中 hiv...

2022-12-10 403 阅读

Hive文件格式(表stored as 的五种类型)

hive文件存储格式包括以下几类: 1、TEXTFILE 2、SEQUENCEFILE 3、RCFILE 4、ORCFILE(0.11以后出现) 5、PARQUET 1、其中TEXTFILE为默认格式,建表时不指定默认为这个格式,导入数据...

2022-12-10 258 阅读

kudu原理

参考:官网:https://kudu.apache.org/docs/index.html 原理: https://blog.csdn.net/nosqlnotes/article/details/79496002 emr: https://help.aliyun.com/document_detail/141545.html?spm=5...

2022-12-10 236 阅读

impala 建表时报错,不支持中文

1.错误信息 (1366, "Incorrect string value: '\\xE6\\x8E\\x88\\xE6\\x9D\\x83...' for column 'search' at row 1")   (1)查看元数据hive库中的编码格式       (2...

2022-12-10 343 阅读