基于Sentry的大数据权限解决方案

发布于：2024-10-24 编辑：匿名来源：网络

说明本文所述的问题和解决方案同样适用于Elastic MapReduce（EMR）。系统环境说明 Linux环境：centos7.4 CDH：5.16.1 Java：1.8.0_Sentry版本：1.5.1 背景 Apache Sentry是Cloudera发布的Hadoop开源组件。

截至目前，它仍然是Apache的一个孵化项目。它提供细粒度、基于角色的授权和多租户管理模型。

Sentry目前可以与Hive/Hcatalog、Apache Solr和Cloudera Impala集成，未来将扩展到HDFS和HBase等其他Hadoop组件。安装哨兵1。

在首页点击集群名称右侧的下拉菜单，点击“添加服务”； 2、选择Sentry，点击“继续”； 3. 选择一组依赖项； 4、确认新服务的主机分配； 5、配置存储数据库；在mysql中创建对应的用户和数据库：代码语言：sql copy mysql> 创建数据库哨兵默认字符集 utf8 collat??e utf8_general_ci;mysql> grant all onsentry.* to 'sentry'@'cdh03.ali.aiwaystack。 com'由'哨兵'标识；mysql>刷新权限；6。

测试连接 7、创建Sentry数据表、启动Sentry服务Hive、启用Sentry服务并启用Hive安全 1、在“Sentry服务”中选择“Sentry” 2、修改以下参数代码语言：javascript copy Hive.warehouse.subdir.inherit .perms-->true3。选择hive-site.xml的Hive服务高级配置代码段（安全阀），添加如下配置：代码语言：javascript copy sentry.hive.testing.mode false 4。

在“Scope”中选择“HiveServer2”，修改如下配置：代码语言：javascript 复制 hive .server2.enable.impersonation、hive.server2.enable.doAs-->false5。在hive-site.xml中选择HiveServer2高级配置代码段（安全阀），添加如下配置代码语言： javascript copy hive.security.authorization.task.factory</name> org.apache.sentry.binding.hive.SentryHiveAuthorizationTaskFactoryImpl6. 选择 hive-site.xml 的 Hive Metastore Server 高级配置代码段（安全阀），添加如下参数：代码语言：javascript 复制 hive.metastore.client.impl org. apache.sentry.binding.metastore.SentryHiveMetaStoreClient 设置 Sentry 用于过滤元数据的自定义 Hive Metastore 客户端。

hive.metastore.pre.event .listeners org.apache.sentry.binding.metastore.MetastoreAuthzBinding 元存储事件的逗号分隔侦听器列表。 hive.metastore.event.listeners <值>org.apache.sentry.binding.metastore.SentryMetastorePostEventListener > 元存储、发布事件的逗号分隔侦听器列表。

hive.metastore.filter.hook org.apache.sentry。绑定.metastore.SentryMetaStoreFilterHook配置yarn并在“允许的系统用户”参数“allowed.system.users”中添加hive用户代码语言：javascript复制Yarn->Configuration->min.user.id修改为合适的值，目前为0，配置sentry管理员组（sentry.service.admin.group）和允许连接用户（sentry.service.allow.connect）添加admin用户和组；选择“服务范围”，修改管理员组，删除默认的“hive”、“impala”、“hue”并添加“admin”在sentry-site.xml中的Sentry服务高级配置代码段（安全阀）中添加以下参数：代码语言：javascript 复制 sentry.service.processor.factories org. apache .sentry.provider.db.service.thrift.SentryPolicyStoreProcessorFactory，org.apache.sentry.hdfs.SentryHDFSServiceProcessorFactory <属性> <名称>sentry.policy.store.plugins <值> org.apache.sentry.hdfs.SentryPlugin<属性> <名称>sentry.hdfs.integration.path.prefixes <值>/user/hive/warehouse 配置HDFS启用ACL和哨兵权限同步。

检查一下。启用其他关联impala配置使用sentryHUE配置使用sentry 等待“生成凭证”命令完成在Cloudera Manager中为任何服务启用安全性后，将自动触发名为“生成凭证”的命令。

您可以在显示正在运行的命令的屏幕右上角看到命令的进度。请等待此命令完成（由包含“0”的灰色框指示）。

站长声明

标签：

上一篇：【云+社区年度征文集】GPE监控介绍及使用

下一篇：JMeter 注释 18 - JMeter 常用配置组件介绍

用GPT-4这样的大模型玩狼人杀，人类因为太蠢被投票判死，真正的逆向图灵测试

在这篇文章中，我们看到了人工智能如何与经典的社交推理游戏互动《狼人杀》结合创造了一个有趣的实验。视频展示了亚里士多德、克利奥帕特拉等以历史人物为模型的人工智能 NPC 与人类玩家互动的场景。人类玩家因答案不够复杂而被淘汰，颠覆了传统的图灵测试。本文探讨了 AI

06-17
杭州出台25条措施加快生物医药产业高质量发展

日前，杭州市人民政府办公厅发布《关于加快生物医药产业高质量发展若干措施的通知》。该措施自2020年11月15日起实施，有效期至2020年12月31日。该措施重点支持药品、高端医疗器械、先进制药装备、新型服务外包、数字医学、医学美容。措施全文如下：关于加快生物医药产业高

06-18
14nm写入上海市政府工作报告：今年实现量产

1月27日，上海市第十五届人民代表大会第二次会议正式开幕。上海市市长应勇作政府工作报告。报告中回顾了2017年上海发展现状，部署了全年重点工作和任务。上海作为国家集成电路产业的重要集聚区，在年度政府工作报告中多处提及集成电路。应勇在回顾一年来的工作时表示，“

06-06
海外呼叫中心服务：连接全球市场的桥梁

.wp-block-column h3{margin-left:0} 1.引言在全球化背景下，越来越多的企业开始寻求拓展海外市场。随着国际贸易的日益频繁和跨境电商的兴起，海外呼叫中心服务作为连接企业与海外客户的重要桥梁，正逐渐受到越来越多企业的关注。本文将对海外呼叫中心服务的定义、重要性、

06-17
库克谈苹果可持续发展计划：我们必须做得好，别人才想效仿 - Feel Good Weekly

Feel Good简介苹果：我们的可持续发展计划必须好到让人想“复制” MINI推出首款电动自行车 lululemon：更多中国消费者正在积极探索“Good Condition”最新快闪店“雀巢咖啡，使用后可以回收。无畏：为旅程提供气候标签的第一步苹果：我们必须可持续“复制”最“绿色”的秋季

06-21
猫生活领先品牌Pidan完成B+轮融资，兴旺投资独家领投，

据7月5日消息，近日，猫生活领先品牌Pidan完成B+轮融资，兴旺投资独家领投。 Pidan品牌起源于法国巴黎。以其高品质、高设计的宠物产品多次荣获德国红点奖。 Pidan独创混合猫砂品类，在天猫猫砂品类中排名第一。 Pidan瞄准“猫市场”，将自己定位为全品类宠物生活方式品牌。

06-17
Village Fund将于今晚在纽约证券交易所上市，沈南鹏称值得长期投资

中式快餐连锁乡村基金今晚将在纽交所上市，成为首家中式餐饮企业。红杉资本中国基金创始人兼高管合伙人沈南鹏在接受新浪财经独家采访时表示，他被乡村基金的“深刻印象”所吸引。它的快速增长才刚刚开始，值得他长期投资。　　Village Base是一家以美味川菜为主，与当地风

06-18
二氧化硅龙头确辰硅化主板挂牌，盈科资本IPO再获丰收

12月7日，确辰硅化（83.SH）在上交所正式挂牌上市。截至目前，盈科资本年度IPO项目总数已达14个，其中科创板6个、创业板4个、主板3个、港交所1个。同期IPO数量继续保持行业领先地位。作为全球前三、亚洲第一的二氧化硅行业领军企业，确成硅化现已形成从原料硫酸、水玻璃到

06-18
南芯半导体完成数千万元A轮融资，顺为资本领投

据投资界1月23日消息，高性能模拟芯片半导体公司南芯半导体完成数千万元A轮融资处于A轮融资中。本轮融资由顺为资本领投，兴业资本海逸、紫米科技跟投。南芯也是顺为资本投资的第一家芯片设计公司。　　南芯半导体成立于2001年，主要从事集成电路芯片的研究、设计、开发和销

06-18
春华资本宣布收购美赞臣大中华区业务

春华资本宣布与利洁时签署最终协议，收购利洁时美赞臣大中华区业务，并将拥有美赞臣品牌在大中华区市场的永久权益此次独家使用权将从业务创新、运营完善、渠道优化、数字化转型等方面支持美赞臣未来在中国的发展。

06-17
英伟达需要警惕的对手来了

市值超1.7万亿美元的AI军火商英伟达开始感受到“危机”，需要警惕各类“对手” 。日前，有消息称孙正义计划筹集1亿美元创建一家AI芯片公司，旨在挑战英伟达。近日，AI芯片初创公司Groq也透露出颠覆英伟达的意图。 NVIDIA在AI芯片市场上无可匹敌。本财年，NVIDIA的销售额连

06-18
春节“医美”热潮，爱美客和昊海生科谁更赚钱？

在外表经济的轨道上，医美项目逐渐成为消费主流。随着春节假期的到来，医美的消费将迎来又一个高峰期。 “医美三剑客”中，爱美客（96.SZ）和昊海生科（66.SH）近日公布了2020年业绩报告：2020年，爱美客预计实现净利润18.10亿元至1.900元亿元，同比增长43%-50%；昊海生科预

06-17