flink下载以及兼容性问题
[1]是國內比較快的。
########################################################################
然后是和hadoop的兼容性問題,[2]中看到maven是這么寫的:
<!-- https://mvnrepository.com/artifact/org.apache.flink/flink-hadoop-compatibility --> <dependency><groupId>org.apache.flink</groupId><artifactId>flink-hadoop-compatibility_2.12</artifactId><version>1.10.1</version><scope>test</scope> </dependency>也就是說兼容scala2.12,去自己的$HADOOP_HOME下面輸入grep? -r scala
cd(Python3.6) appleyuchi@Desktop:~$ cd $HADOOP_HOME
(Python3.6) appleyuchi@Desktop:hadoop-3.1.2$ grep -r scala
share/hadoop/yarn/webapps/ui2/WEB-INF/classes/META-INF/NOTICE.txt: ? ?* https://github.com/akka/akka/blob/wip-2.2.3-for-scala-2.11/akka-actor/src/main/java/akka/dispatch/AbstractNodeQueue.java
也就是說比hadoop用的scala還要新一些,應該是沒問題的。
########################################################################
Reference:
[1]https://mirrors.tuna.tsinghua.edu.cn/apache/flink/flink-1.10.1/apache-flink-1.10.1.tar.gz
[2]https://mvnrepository.com/artifact/org.apache.flink/flink-hadoop-compatibility_2.12/1.10.1
?
創作挑戰賽新人創作獎勵來咯,堅持創作打卡瓜分現金大獎總結
以上是生活随笔為你收集整理的flink下载以及兼容性问题的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: Tez UI界面一直处于loading
- 下一篇: flink編譯hadoop3.1.2(失