2023学年完整公开课版审计YARN操作_第1页
2023学年完整公开课版审计YARN操作_第2页
2023学年完整公开课版审计YARN操作_第3页
2023学年完整公开课版审计YARN操作_第4页
2023学年完整公开课版审计YARN操作_第5页
已阅读5页,还剩6页未读 继续免费阅读

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

主讲:侯磊审计YARN操作目录0102Sentry和Hive授权审计YARN操作Sentry和Hive授权1Sentry和Hive授权当客户端访问Hive表时,受到的唯一限制就是HDFS文件权限,这些权限不是很强。用户可以轻松地更改Hivemetastore。用户创建表,将数据插入表或根据任何Hive表运行查询的能力没有被限制。通过Sentry进行Hive授权,可以使用精细授权策略。虽然Hive使用我们熟悉的数据库术语(如表、行和分区),但Hive表实际上是HDFS目录,Hive表的分区是主HDFSHive目录下的子目录。可以在数据库或表级别上为用户、组或角色分配各种Hive权限,例如select、update和alter。Sentry和Hive授权但是,Hive在权限方面存在严重的缺陷:由于可以直接更改HDFS权限,因此Hive中没有内置用来防止存储在Hive.metastore中的元数据与HDFS文件权限不匹配的功能。Hive无法限制表数据部分的权限,也不能提供列级别权限或定义服务器级角色。在Sentry中能够在服务器、数据库和表级别创建角色。也可以使用这些角色为用户提供对表数据的部分访问权限。Sentry和Hive授权一个关键的安全问题是保护Hive元数据库免受客户任意改变。HiveServer2的目标是通过JDBC和ODBC用户界面来支持来自客户端的请求。HiveServer2访问Hivemetastore以获取元数据信息,并为客户端执行必要的Hive操作。使用Sentry,可以确保所有HiveServer2联系人都获得授权,并且用户必须使用HiveServer2才能访问Hive数据库。总而言之,在配置Hive的Sentry授权时,必须确保HiveServer2和Hive元数据库的安全。审计YARN操作2审计YARN操作Hadoop用户在两个不同的日志文件中记录YARN操作。ResourceManager日志文件包括ResourceManager执行的活动,例如提交应用程序请求和分配容器。NodeManager日志文件跟踪YARN应用程序中的每个NodeManager做的事情,例如容器请求。可以在YARNperties文件中使用配置属性来配置YARN审计事件跟踪。审计YARN操作假设用户sam通过YARN提交MapReduce应用程序。ResourceManager日志文件(部分)如下所示:审计YARN操作可以看到,YARN为用户sam授权以下类型的YARN应用程序:■应用申请■分

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

评论

0/150

提交评论