星空捞月:找寻心中的安宁
首页
归档
分类
标签
关于
Oracle JDBC为什么不能在Maven中直接配置?
在实际项目中,我们通常使用这样的方式:首先,下载ODBC的Jar到本地;然后,通过Maven安装在本地库中。这样在项目中就可以使用ODBC的Jar包了,而大部分的jar是可以通过Maven中直接引用的。这是为什么呢? 项目报错 项目直接编译,报错如下 Failed to execute goal on project sql2o-oracle: Co
2018-09-12
Java
调研
问题
JDBC
Hive复杂类型的导入
Hive是大数据体系下ETL、数据预处理、数仓等领域比较重要的组件,应用广泛。博主空闲时间研究一下Hive的数据类型。 1. Hive数据类型组成 关于Hive的数据类型,官方文档展示的比较全面,关于数据类型的详细说明Hive数据类型,这里总结如下| 大类 | 类型 | 具体类型 || – | – | - || 基本类型| 数值型 |tinyint,s
2018-08-10
大数据
调研
Hive
Springboot报错
报错一 错误信息: Cannot determine embedded database driver class for database type NONE 解决方案:启动类中加入注解:@SpringBootApplication(exclude={DataSourceAutoConfiguration.class,HibernateJpaAutoConfiguration.class})
2018-08-07
Java
问题
Springboot
Hive JDBC任务执行流程
Hive提供了多种访问方式,其中JDBC是一种。通常通过JDBC访问,可以规避用户对HDFS、Metastore的直接访问。本文研究研究一下HiveJDBC执行任务的流程。 JDBC执行流程 主要流程分为三条线: 执行任务,无返回 执行完成,获取执行结果[boolean/int],直接结束 执行任务,返回数据 执行完成,通过接口获取数据,用户执行其
2018-08-04
大数据
调研
Hive
Hive提交任务流程
1. 环境描述 2. 初识Thrift 2.1. 基本类型 2.2. 关键概念 2.2.1. 关键字 2.2.2. Thrift三组件 2.2.3. 简单示例 3. HiveServer2提交任务 3.1. HiveServer2启动流程 3.2. 提交任务流程 3.3. 服务器端执行任务流程 3.4. 队列管理方式 3.5. 关闭任务流程 4. HiveServer2的优缺点
2018-08-04
大数据
调研
Hive
《模式识别:算法及其实现方法》读书笔记
作者:M.Narasimha Murty, V. Susheela Devi 翻译:王振永 出版社:哈尔滨工业大学出版社 导论 模式识别可以定义为基于已知知识或者依据模式标书所抽象出来的统计信息进行数据分类的方法。 模式识别有很多重要的应用,例如多媒体文档自动识别(MDR)和自动医疗诊断。在进行MDR时,必须处理文本、音频和视频数据的集合。文本数据
2018-07-28
读书笔记
深度学习
MachineLearning
DataX之SplitPK原理
DataX的简单介绍,可以参考Alibaba DataX调研使用 ,这里不做详细介绍。在同步数据时,如果数据源是RDBMS,存在配置参数splitPk。那么该参数是如何起作用的,如何配置? 配置方式 splitPk的配置方式,主要参考(DataX文档)[https://github.com/alibaba/DataX]。 描述: &ems
2018-07-25
Java
DataX
调研
Maven之Pom配置学习总结
Filter POM中可以配置一些properties,这些属性一般而言实在各种pom中使用,但也可以在一些配置文件中使用,例如 ### pom文件配置 com.mysql.jdbc.Driver jdbc:mysql://localhost:3306/database?autoReconnect=true myusername mypassword
2018-07-17
Java
总结
Maven
分布式Java应用读书笔记
分布式Java应用
2018-07-10
读书笔记
Java
Netty权威指南读书笔记
Netty权威指南,是一本广受欢迎的Netty书籍。博主研读的是2014年6月第一版,第二次印刷的书本。
2018-07-09
读书笔记
Java
Netty
1
2
3
4
…
9
搜索
×
关键词