日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

Flink开发环境搭建(maven)

發布時間:2025/3/21 编程问答 24 豆豆
生活随笔 收集整理的這篇文章主要介紹了 Flink开发环境搭建(maven) 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

1、下載scala sdk

http://www.scala-lang.org/download/?直接到這里下載sdk,(https://downloads.lightbend.com/scala/2.12.8/scala-2.12.8.msi)

?

2、下載scala for intellij idea的插件

File->setting->plugins里搜索Scala,然后安裝即可

?

3、https://maven.apache.org/download.cgi

http://mirrors.shu.edu.cn/apache/maven/maven-3/3.6.0/binaries/apache-maven-3.6.0-bin.zip

?

4、生成工程

mvn archetype:generate -DarchetypeGroupId=org.apache.flink -DarchetypeArtifactId=flink-quickstart-scala

或者

mvn archetype:generate -DarchetypeGroupId=org.apache.flink -DarchetypeArtifactId=flink-quickstart-java -DarchetypeCatalog=https://repository.apache.org/content/repositories/snapshots/ -DarchetypeVersion=1.7-SNAPSHOT

?

5、scala統計詞頻示例

package com.test.simport org.apache.flink.api.scala._object WordCount {def main(args: Array[String]) {val env = ExecutionEnvironment.getExecutionEnvironment// get input dataval text = env.readTextFile("D:\\git\\test\\pom.xml")val counts = text.flatMap { _.toLowerCase.split("\\W+") filter { _.nonEmpty } }.map { (_, 1) }.groupBy(0).sum(1)// counts.writeAsCsv("D:\\git\\test\\output.txt", "\n", " ") counts.print()env.execute("Socket Window WordCount")} }

?

  • 直接按照樣例執行,可能出現以下錯誤:
Exception in thread "main" java.lang.RuntimeException: No new data sinks have been defined since the last execution. The last execution refers to the latest call to 'execute()', 'count()', 'collect()', or 'print()'.
  • 參照此文,原因是print()方法自動會調用execute()方法,造成錯誤,所以注釋掉env.execute()即可

轉載于:https://www.cnblogs.com/linn/p/10454921.html

總結

以上是生活随笔為你收集整理的Flink开发环境搭建(maven)的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。