安装oozie-5.1.0遇到的坑

正好编译还在进行,抽时间写写踩坑日志。
一 安装oozie,最新版5.2.0,而网上较多都是4.3.1,我就试了试5.1.0。刚从cdh版本换成apache版本,很多都要重新来,cdh版本oozie都是编译好的,下载下来一个多G,都需要10多步的配置,然而从apache官网下的版本只需要2.7M,需要自己编译,这其中的坑数不胜数也,先把编译前的坑写一点,以后遇到了再完善。
1.1 从官网下的版本安装oozie-5.1.0遇到的坑
这个是要配合maven使用,所以我又下了个maven
安装oozie-5.1.0遇到的坑
都放在/opt/app目录下的,都是解压后直接用的。首先改maven配置,仓库的问题,有些人采用中央仓库,有些人采用阿里云的,其实我觉得都OK,也是根据实际情况来,maven我采用阿里云的,但是oozie后面由于持续报错,我又采用了中央仓库,后来发现错误不在这上面。。。。。
maven的conf/settings.xml文件肯定要改改的,文件夹repository自己建的。(用的时候把!去掉,我****编辑还不熟悉,<>会默认掉)
本地仓库地址:<!localRepository>/opt/app/maven-3.6.3/repository <!/localRepository>
中央仓库地址加上去:
<!mirror>
<!id>nexus-aliyun<!/id>
<!mirrorOf>*<!/mirrorOf>
<!name>Nexus aliyun<!/name>
<!url>http://maven.aliyun.com/nexus/content/groups/public<!/url>
<!/mirror>
,这里就差不多了,可能有遗忘,但肯定都是官网安装步骤不够显明的地方。
1.2 主要踩坑点,首先看报错信息
安装oozie-5.1.0遇到的坑
Non-resolvable parent POM: Could not transfer artifact org.apache:apache:pom:17 from/to central (http://repo1.maven.org/maven2): Failed to transfer file: http://repo1.maven.org/maven2/org/apache/apache/17/apache-17.pom. Return code is: 501 , ReasonPhrase:HTTPS Required. and ‘parent.relativePath’ points at wrong local POM @ line 21, column 13 -> [Help 2]
困扰了我很久,网上说是改maven仓库的,我改了是肯定的啊,然后又是一大堆算起八糟的,困扰了我半天,睡一觉起来灵感来了,会不会是oozie里面自带的pom.xml文件写了错误的仓库地址,后来一查是的。

原因:oozie的pom.xml中的地址是这样的:<!id>central<!/id>的url是http://repo1.maven.org/maven2,然后电脑又不识别http,只认https!!!。

解决办法:改成https。

搞了我一宿,看来也是关在家放浪了些,另外pom.xml的Java版本和Hadoop版本也要改的。
然后运行bin/mkdistro.sh -DskipTest开始编译吧,要很久的。
需要注意的是,查找问题区间还下了几个包放在maven的lib目录下,不知道是不是关键点了,附上:
https://repo.spring.io/plugins-release/org/pentaho/pentaho-aggdesigner-algorithm/5.1.5-jhyde/pentaho-aggdesigner-algorithm-5.1.5-jhyde.jar

https://repository.cloudera.com/content/repositories/releases/org/apache/maven/doxia/doxia-module-twiki/1.0-alpha-9.2y/doxia-module-twiki-1.0-alpha-9.2y.jar

https://repository.cloudera.com/content/repositories/releases/org/apache/maven/doxia/doxia-core/1.0-alpha-9.2y/doxia-core-1.0-alpha-9.2y.jar

其它的编译后在补上,编译前的坑就这些了。