Antlr4 是一個(gè)強(qiáng)大的解析器的生成器，可以用來(lái)讀取、處理、執(zhí)行或翻譯結(jié)構(gòu)化文本，ANTLR可以從語(yǔ)法上來(lái)生成一個(gè)可以構(gòu)建和遍歷解析樹(shù)的解析器，最出名的Spark計(jì)算引擎2.x就是用它來(lái)解析SQL的，是一個(gè)牛到?jīng)]朋友的家伙。

先來(lái)看看它大概的解析規(guī)則

IDEA測(cè)試

IDEA語(yǔ)法分析插件

下載 antlr-v4-grammar-plugin

插件安裝

antlr-v4-grammar分析插件

g4語(yǔ)法文件使用的是sparkSQL的 SqlBase.g4 文件進(jìn)行改造的 ArcSql.g4

右鍵選中 multiStatement 進(jìn)行測(cè)試

antlr4

測(cè)試SQL語(yǔ)法樹(shù)

antlr4-SQL-測(cè)試

生成解析配置

antlr4-生成解析代碼

右鍵ArcSQL.g4文件，在下拉選項(xiàng)Configure ANTLR即可出來(lái)。

第一個(gè)Output directory...要寫上輸出代碼的路徑。

比如把它放到當(dāng)前項(xiàng)目的antlr4的包中/dounine/github/arc/src/main/scala/com/dounine/arc/antlr4

右鍵ArcSQL.g4文件，選中Generate ANTLR Recognizer即可生成

會(huì)生成如下幾個(gè)文件

ArcSQL.interpArcSQL.tokensArcSQLBaseListenerArcSQLBaseVisitorArcSQLLexerArcSQLLexer.interpArcSQLLexer.tokensArcSQLListenerArcSQLParserArcSQLVisitor

代碼測(cè)試

依賴

compile group: 'org.antlr', name: 'antlr4', version: '4.7.2'

被動(dòng)模式(樹(shù)解析到節(jié)點(diǎn)了通知)

val loadLexer = new ArcSQLLexer(CharStreams.fromString( """ select toUp(name) from log; """))val tokens = new CommonTokenStream(loadLexer)val parser = new ArcSQLParser(tokens)val ctx = parser.multiStatement()val listener = new ArcSQLBaseListener() { override def exitQuerySpecification(ctx: ArcSQLParser.QuerySpecificationContext): Unit = { val input = ctx.start.getTokenSource.asInstanceOf[ArcSQLLexer]._input val start = ctx.start.getStartIndex val stop = ctx.stop.getStopIndex val interval = new Interval(start, stop) val sqlText = input.getText(interval) println("表名 => " + ctx.tableAlias().strictIdentifier().getText) println("完整SQL =>" + sqlText) } }ParseTreeWalker.DEFAULT.walk(listener, ctx)

輸出(在ctx中還有很多關(guān)于sql樹(shù)信息)

表名 => log完整SQL =>select toUp(name) from log

主動(dòng)模式(主動(dòng)去要數(shù)據(jù))

val vistor = new ArcSQLBaseVisitor[Unit] { override def visitQuerySpecification(ctx: QuerySpecificationContext): Unit = { val input = ctx.start.getTokenSource.asInstanceOf[ArcSQLLexer]._input val start = ctx.start.getStartIndex val stop = ctx.stop.getStopIndex val interval = new Interval(start, stop) val sqlText = input.getText(interval) println("表名 => " + ctx.tableAlias().strictIdentifier().getText) println("完整SQL =>" + sqlText) }}vistor.visit(ctx)

---

最后

每天發(fā)布更多新鮮有含量的技術(shù)文章、總有一款適合你。

快關(guān)注我、把我打包帶走、每天提醒你學(xué)習(xí)一手技術(shù)。

總結(jié)

以上是生活随笔為你收集整理的antlr4 idea插件_正则都搞不定、我还有Antlr4解析器的全部?jī)?nèi)容，希望文章能夠幫你解決所遇到的問(wèn)題。

如果覺(jué)得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。