?經(jīng)測(cè)試Spark-sql 只支持Sentry表、庫(kù)權(quán)限，不支持Sentry 對(duì)Hive列權(quán)限讀的控制，設(shè)置列權(quán)限讀，Spark-sql是無(wú)權(quán)限讀取的

對(duì)hive表某一列有讀權(quán)限設(shè)置

代碼如下，jast_column用戶(hù)有對(duì)hive表test的s2列讀權(quán)限，這里使用spark1.6舉例

val conf = new SparkConf().setAppName("test")val sc = new SparkContext(conf)val sqlContext = new HiveContext(sc)sqlContext.sql("""| select s2| from test| limit 10""".stripMargin).show()

Spark啟動(dòng)報(bào)錯(cuò)如下?

Exception in thread "main" org.apache.hadoop.security.AccessControlException: Permission denied: user=jast_column, access=READ_EXECUTE, inode="/user/hive/warehouse/test":hive:hive:drwxrwx--x

如果授權(quán)給jast_column 表的讀權(quán)限就可以正常 返回

+-------+-------+ | s1| s2| +-------+-------+ | a| b| | 1| 2| | 2| 333| |test111|test000| | test44| test55| |test111|test000| +-------+-------+

?

?

?

?

創(chuàng)作挑戰(zhàn)賽新人創(chuàng)作獎(jiǎng)勵(lì)來(lái)咯，堅(jiān)持創(chuàng)作打卡瓜分現(xiàn)金大獎(jiǎng)

總結(jié)

以上是生活随笔為你收集整理的Sentry ： Spark-sql 读取hive数据 权限问题的全部?jī)?nèi)容，希望文章能夠幫你解決所遇到的問(wèn)題。

如果覺(jué)得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。