java MapReduce wordcount 输入路径为目录 java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio.NativeIO$POSIX.stat(Ljava/lang/String;)Lorg/apache/hadoop/io/nativeio/NativeIO$POSIX$Stat;
之前windows下执行wordcount都正常,今天执行的时候指定的输入路径是文件夹,然后就报了如题的错误,把输入路径改成文件后是正常的,也就是说目前的wordcount无法对多个文件操作 报的异常是get...
SparkSQL 运行异常：org/codehaus/janino/InternalCompilerException 执行SparkSQL时出现异常：
Exception in thread "main" java.lang.NoClassDefFoundError: org/codehaus/janino/InternalCompilerException at org.apache.spark.sql.catalyst.expressions.codegen.GenerateSafePr...
build.gradle中引入jar
只需在 dependencies{}中添加： compile fileTree(include: , dir: 'libs')
linux Linux 命令神器：lsof
lsof是系统管理/安全的尤伯工具。将这个工具称之为lsof真实名副其实，因为它是指“列出打开文件（lists openfiles）”。而有一点要切记，在Unix中一切（包括网络套接口）都是文...
spring springBoot多数据源配置，如mysql、hive，使用druid连接池
总共需要以下几个类： package com.config.datasource; import com.alibaba.druid.pool.DruidDataSource;import lombok.extern.slf4j.Slf4j;import org.springframework.beans.factory.annot...
spring SpringBoot多数据源配置(hive/mysql)---自测可以，重点
简介在项目实践中，同一个项目可能需要整合多种数据源，把分散到各个数据库、数据表的数据都查询统计出来；SpringBoot有默认的数据源配置，本篇博客将整合SpringBoot多数据源配置，包括mysql...
spring SpringBoot 集成 Impala + mybatis + druid
1. 获取依赖Impala的依赖在maven仓库下载不了，需要自己去官网下载: https://www.cloudera.com/downloads/connectors/impala/jdbc/2-6-3.html , 麻烦可直接去博主的GitHub项目中获取 2. 配置...
kudu表数据的导入导出
一、kudu数据导出到文件例： impala-shell -l -u xuyi --auth_creds_ok_in_clear -q "select sms_content from warehouse.restart where eventId='filtrate_inbox_sms_delete_sm...
Excel数据导入hive步骤
1. Excel导出逗号文件.csv 2. 将CSV文件导入到hive服务器制定目录 3. 转换编码格式 转换编码格式，在指定目录下执行如下命令：piconv -f gb2312 -t UTF-8 CompanyCode.txt > &nbs...
hive 从Excel中导入数据
拿到Excel表后将数据保留，其他的乱七八糟都删掉，然后另存为txt格式的文本，用nodepad++将文本转换为UTF-8编码，此处命名为cityprovince.txt 将cityprovince.txt传入操作的Linux环境中 hiv...