Apache Hive™是一个数据仓库软件。他的主要用途是 使用sql语法
读取、编写和管理 驻留在分布式存储中的大型数据集。
spring-scope
Scope 是一种 策略接口,主要用于管理 bean的声明周期。Scope由 ConfigurableBeanFactory调用。
Spring中用了哪些设计模式
web请求处理流程
访问者模式
访问者模式 主要解决了 稳定的数据结构和易变的操作耦合问题。
parquetMetaData
parquetMetaData 结构
jpmml-sparkml源码结构介绍
jpmml-sparkml源码结构介绍
xgboost
xgboost pmml output 字段问题
xgboost 在生成 miningMode 时,会将 mathContext设置为float。(org.jpmml.xgboost.ObjFunction.createMiningModel(..))
xgboost 在生成 output 中的 xgbValue 字段时,字段类型为 float 类型。
xgboost 在生成 output 中的 probability(0)和probability(1)字段时,根据 mathContext类型设置字段类型。(org.jpmml.converter.ModelUtil.createProbabilityOutput(..))
jpmml-spark 在 生成output中的probability(0)和probability(1)字段,字段类型为 double。(org.jpmml.sparkml.ClassificationModelConverter.registerOutputFields(..))
上述过程 生成了 相同的 probability(0)。在pmml生成阶段会报错,删除其中 3 生成的字段即可。
线程池
[TOC]