善皮之的博客

Maven打入依赖中指定的部分jar包开门见山  项目运行的环境里面已经有该项目的所有代码依赖，所以项目的代码只要将自己的代码打入进去就能提交到环境中运行了。但是不好的地方就是项目运行环境里面有一个jar包是pom文件依赖其它项目的jar包，当这个jar包代码发生变更的时候，需要将环境中的该代码对应的jar包进行替换，所以最后得到的项目jar包中打入该项目的代码之后还需要打入其它项目的最新代码。操作过程模板如下： <build> <plugins>

Sqoop导入数据内存溢出  利用sqoop可以将RDBMS的数据导入到HDFS上，但是在使用sqoop的时候，以mysql数据导入到hive数据为例，如果不注意设置MapReduce的资源，是会出现一个叫做GC limit xxxxx的错误的。如下面的脚本sqoop import \--connect jdbc:mysql://localhost:3306/your_database \...

Scala 读入xlsx文件原理 ：主要是利用java的poi包poi官网:主页传送门API传送门准备依赖: <dependency> <groupId>org.apache.poi</groupId> <artifactId>poi</artifactId>...

TypeSafeConfig读取非resource文件配置ConfigFactory.load()函数默认读取System.properties中的参数，可以在load()方法之前设置Config参数例如:在代码中直接设置变量参数System.setProperty("myConfig","This config is set before call load() method");C...