當前位置:
首頁 >
Sentry : Spark-sql 读取hive数据 权限问题
發布時間:2024/8/23
40
豆豆
生活随笔
收集整理的這篇文章主要介紹了
Sentry : Spark-sql 读取hive数据 权限问题
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
?經測試Spark-sql 只支持Sentry表、庫權限,不支持Sentry 對Hive列權限讀的控制,設置列權限讀,Spark-sql是無權限讀取的
對hive表某一列有讀權限設置
代碼如下,jast_column用戶有對hive表test的s2列讀權限,這里使用spark1.6舉例
val conf = new SparkConf().setAppName("test")val sc = new SparkContext(conf)val sqlContext = new HiveContext(sc)sqlContext.sql("""| select s2| from test| limit 10""".stripMargin).show()Spark啟動報錯如下?
Exception in thread "main" org.apache.hadoop.security.AccessControlException: Permission denied: user=jast_column, access=READ_EXECUTE, inode="/user/hive/warehouse/test":hive:hive:drwxrwx--x如果授權給jast_column 表的讀權限就可以正常 返回
+-------+-------+ | s1| s2| +-------+-------+ | a| b| | 1| 2| | 2| 333| |test111|test000| | test44| test55| |test111|test000| +-------+-------+?
?
?
?
創作挑戰賽新人創作獎勵來咯,堅持創作打卡瓜分現金大獎總結
以上是生活随笔為你收集整理的Sentry : Spark-sql 读取hive数据 权限问题的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 张小龙:如何把产品做简单
- 下一篇: Phoenix 关联映射 Hbase表