基于Sentry的大数据权限解决方案

发布于:2024-10-24 编辑:匿名 来源:网络

说明本文所述的问题和解决方案同样适用于Elastic MapReduce(EMR)。系统环境说明 Linux环境:centos7.4 CDH:5.16.1 Java:1.8.0_Sentry版本:1.5.1 背景 Apache Sentry是Cloudera发布的Hadoop开源组件。

截至目前,它仍然是Apache的一个孵化项目。它提供细粒度、基于角色的授权和多租户管理模型。

Sentry目前可以与Hive/Hcatalog、Apache Solr和Cloudera Impala集成,未来将扩展到HDFS和HBase等其他Hadoop组件。安装哨兵1。

在首页点击集群名称右侧的下拉菜单,点击“添加服务”; 2、选择Sentry,点击“继续”; 3. 选择一组依赖项; 4、确认新服务的主机分配; 5、配置存储数据库;在mysql中创建对应的用户和数据库: 代码语言:sql copy mysql> 创建数据库哨兵 默认字符集 utf8 collat??e utf8_general_ci;mysql> grant all onsentry.* to 'sentry'@'cdh03.ali.aiwaystack。 com'由'哨兵'标识;mysql>刷新权限;6。

测试连接 7、创建Sentry数据表、启动Sentry服务Hive、启用Sentry服务并启用Hive安全 1、在“Sentry服务”中选择“Sentry” 2、修改以下参数代码语言:javascript copy Hive.warehouse.subdir.inherit .perms-->true3。选择hive-site.xml的Hive服务高级配置代码段(安全阀),添加如下配置:代码语言:javascript copy sentry.hive.testing.mode false 4。

在“Scope”中选择“HiveServer2”,修改如下配置: 代码语言:javascript 复制 hive .server2.enable.impersonation、hive.server2.enable.doAs-->false5。在hive-site.xml中选择HiveServer2高级配置代码段(安全阀),添加如下配置代码语言: javascript copy hive.security.authorization.task.factory</name> org.apache.sentry.binding.hive.SentryHiveAuthorizationTaskFactoryImpl6. 选择 hive-site.xml 的 Hive Metastore Server 高级配置代码段(安全阀),添加如下参数:代码语言:javascript 复制 hive.metastore.client.impl org. apache.sentry.binding.metastore.SentryHiveMetaStoreClient 设置 Sentry 用于过滤元数据的自定义 Hive Metastore 客户端。

hive.metastore.pre.event .listeners org.apache.sentry.binding.metastore.MetastoreAuthzBinding 元存储事件的逗号分隔侦听器列表。 hive.metastore.event.listeners <值>org.apache.sentry.binding.metastore.SentryMetastorePostEventListener > 元存储、发布事件的逗号分隔侦听器列表。

hive.metastore.filter.hook org.apache.sentry。绑定.metastore.SentryMetaStoreFilterHook配置yarn并在“允许的系统用户”参数“allowed.system.users”中添加hive用户代码语言:javascript复制Yarn->Configuration->min.user.id修改为合适的值,目前为0,配置sentry管理员组(sentry.service.admin.group)和允许连接用户(sentry.service.allow.connect)添加admin用户和组;选择“服务范围”,修改管理员组,删除默认的“hive”、“impala”、“hue”并添加“admin”在sentry-site.xml中的Sentry服务高级配置代码段(安全阀)中添加以下参数: 代码语言:javascript 复制 sentry.service.processor.factories org. apache .sentry.provider.db.service.thrift.SentryPolicyStoreProcessorFactory,org.apache.sentry.hdfs.SentryHDFSServiceProcessorFactory <属性> <名称>sentry.policy.store.plugins <值> org.apache.sentry.hdfs.SentryPlugin<属性> <名称>sentry.hdfs.integration.path.prefixes <值>/user/hive/warehouse 配置HDFS启用ACL和哨兵权限同步。

检查一下。启用其他关联impala配置 使用sentryHUE配置 使用sentry 等待“生成凭证”命令完成 在Cloudera Manager中为任何服务启用安全性后,将自动触发名为“生成凭证”的命令。

您可以在显示正在运行的命令的屏幕右上角看到命令的进度。请等待此命令完成(由包含“0”的灰色框指示)。

基于Sentry的大数据权限解决方案

站长声明

版权声明:本文内容由互联网用户自发贡献,本站不拥有所有权,不承担相关法律责任。如果发现本站有涉嫌抄袭的内容,欢迎发送邮件 举报,并提供相关证据,一经查实,本站将立刻删除涉嫌侵权内容。

标签:

相关文章

  • 阿里拍卖4个深交所交易席位各60万成交

    阿里拍卖4个深交所交易席位各60万成交

    据投资界7月30日消息,据财联社报道,今日,阿里拍卖4个深交所交易席位司法拍卖平台。 具体来说,被拍卖的四枚深交所席位号分别是00、00、00、00。 起拍价60万元,市场价60万元,保证金6万元,加价元,拍卖开始时间为8月23日,竞拍期为一天。 席位号原持有人为珠海中业信托投

    06-18

  • 隐形正畸品牌美狮获数千万元A轮融资

    隐形正畸品牌美狮获数千万元A轮融资

    据投资界4月8日消息,隐形正畸品牌美狮完成数千万元A轮融资,投资方包括中信资本和雅惠投资。 此前,其曾获得世纪河、天宇医疗等机构的融资。 这些资金主要用于研发投入,包括数字图形软件、高分子材料、临床医学基地建设等。 美视团队于年底成立。 截至目前,美视产品已覆盖

    06-18

  • 产融深度融合,九和集团战略投资中国华融

    产融深度融合,九和集团战略投资中国华融

    投资行业动态,近日,九和集团战略投资中国华融。 双方将携手进军军工领域,携手地方政府平台打造军民融合综合体。 当地经济腾飞。 作为一家国有背景、产融结合的企业集团,九和集团通过资本赋能,助力地方经济和企业发展。 投资多家军工企业,与多个地方政府共同建设军工园区

    06-17

  • 证监会:启动私募创投基金向投资者实物配置股票试点

    证监会:启动私募创投基金向投资者实物配置股票试点

    投资界(ID:pedaily)据7月10日消息,证监会发布公告称,为完善私募股权投资基金和创业投资基金(以下简称私募创业投资基金)非现金分配机制,拓宽私募股权创业投资基金退出渠道,促进投资-退出-再投资的良性循环。 近日,证监会启动私募股权创业投资基金向投资者实物派发股

    06-17

  • 解决2亿灵活就业人员问题,小包智工获盖亚工场战略投资

    解决2亿灵活就业人员问题,小包智工获盖亚工场战略投资

    投资圈(ID:pedaily)据12月8日消息,在线招聘平台“小包智工”完成劳动力SaaS战略制造商“Gaia Works”投资。 小包智工联合创始人及CEO鲍冠羽表示,本轮融资将主要用于小包智工4.0版本的产品开发,服务更多城市和行业。 去年,小包智工获得了云歌情报的战略投资。 小包智工

    06-17

  • 每日游鲜完成新一轮融资4.95亿美元,由中金资本领投

    每日游鲜完成新一轮融资4.95亿美元,由中金资本领投

    在投资界,7月23日,每日游鲜宣布完成新一轮4.95亿美元融资。 本轮融资由中金资本旗下基金领投,工银国际、腾讯、阿布扎比资本集团、苏州常熟政府产业基金、老虎环球、高盛资管旗下基金等数家机构共同跟投,华兴资本跟投作为专属财务顾问。 本轮融资也是目前生鲜配送行业最大

    06-18

  • 联发科将于今年晚些时候推出支持 5G 的 7nm 芯片组

    联发科将于今年晚些时候推出支持 5G 的 7nm 芯片组

    据一份新报告称,台湾芯片制造商联发科计划今年推出 5G 芯片组。 这款新芯片组将与高通 Snapdragon 和海思麒麟竞争。 联发科芯片组主要应用于入门级和中端智能手机。 新的联发科5G芯片组将采用7nm制造工艺。 据联发科称,新芯片组将比最新的 Helio P90 更强大。 与其他产品不

    06-06

  • 1药网:四季度营收34.6亿元,同比增长30.9%

    1药网:四季度营收34.6亿元,同比增长30.9%

    1药网发布四季度及全年业绩报告。 财报显示,第四季度营收34.6亿元,同比增长30.9%; 2019年1月,药网实现全年营收破亿元,同比增长52%,营收首次突破百亿。

    06-18

  • “艺赛旗”获金蝶超亿元战略投资,联合推出“苍穹+RPA”一体化产品及智能自动化解决方案

    “艺赛旗”获金蝶超亿元战略投资,联合推出“苍穹+RPA”一体化产品及智能自动化解决方案

    今日举行的金蝶云苍穹峰会上,金蝶宣布战略投资国内RPA企业艺赛旗。 金蝶在企业云服务和云原生技术领域拥有多年的经验和行业理解,结合艺赛旗在RPA领域的技术优势,联合推出“琼+RPA”一体化产品和智能自动化解决方案,致力于打造为数万企业用户带来数十亿的利益。 提高数字虚

    06-18

  • 云南意外诞生独角兽:耀明半导体近百亿

    云南意外诞生独角兽:耀明半导体近百亿

    此次抵达云南。 投资界获悉,耀明半导体近日正式宣布完成B轮股权融资,金额超12亿元,投后估值近百亿元。 本轮融资由国家绿色发展基金有限责任公司领投,金石投资、国投创合、浙江海港集团、宁波开投集团、楚雄城乡投资等跟投。 于是,这家来自云南的新能源公司成为了独角兽公

    06-18

  • 阿里云【AI24小时】2024年5月6日

    阿里云【AI24小时】2024年5月6日

    阿里云创业平台推出AI24小时系列文章,搜集国内外最新的AI人工智能前沿资讯,帮助AI创业者掌握最新行业资讯。 1.AI PC激战,联想、华为、荣耀出击>> 随着AI技术的快速发展,AI PC已成为消费电子领域的热点。 联想、华为、荣耀等各大厂商相继推出了自己的AI PC产品。 近年来,

    06-17

  • 张剑锋谈阿里云新定位:数字经济基础设施

    张剑锋谈阿里云新定位:数字经济基础设施

    9月25日,在杭州云栖大会上,阿里云智能总裁张剑锋在主题演讲中表示,阿里云已经从单纯的云基础设施逐步演变今天,我们已经成为智能云提供商:从大数据、AI、物联网到协同办公,以及未来软硬件一体化的云平台。 他表示,“阿里巴巴走过了十年,一步一步走到了今天。 我认为未

    06-18