Managed Service for Apache Spark 审核日志记录

本文档介绍了 Managed Service for Apache Spark 和 Managed Service for Apache Spark 的审核日志记录。 Cloud de Confiance by S3NS 服务会生成审核日志,以记录 Cloud de Confiance by S3NS 资源中的管理和访问活动。如需详细了解 Cloud Audit Logs,请参阅以下内容:

服务名称

Managed Service for Apache Spark 和 Managed Service for Apache Spark 审核日志使用服务名称 dataproc.googleapis.com。针对此服务的过滤条件:

    protoPayload.serviceName="dataproc.googleapis.com"

方法(按权限类型)

每个 IAM 权限都有一个 type 属性,该属性的值是一个枚举,可以是以下四个值之一:ADMIN_READ、ADMIN_WRITE、DATA_READ 或 DATA_WRITE。在您调用某个方法时,Managed Service for Apache Spark 和 Managed Service for Apache Spark 会生成一个审核日志,其类别取决于执行该方法所需权限的 type 属性。需要 IAM 权限且 type 属性值为 DATA_READ、DATA_WRITE 或 ADMIN_READ 的方法会生成数据访问审核日志。需要 IAM 权限且 type 属性值为 ADMIN_WRITE 的方法会生成管理员活动审核日志。

以下列表中标记为 (LRO) 的 API 方法是长时间运行的操作 (LRO)。 这些方法通常会生成两个审核日志条目:一个在操作开始时生成,另一个在操作结束时生成。如需了解详情,请参阅长时间运行的操作的审核日志。
权限类型 方法
ADMIN_READ google.cloud.dataproc.v1.ClusterController.GetCluster
google.cloud.dataproc.v1.ClusterController.ListClusters
google.cloud.dataproc.v1.JobController.GetJob
google.cloud.dataproc.v1.JobController.ListJobs
google.cloud.dataproc.v1.NodeGroupController.GetNodeGroup
google.iam.v1.IAMPolicy.GetIamPolicy
google.longrunning.Operations.GetOperation
google.longrunning.Operations.ListOperations
ADMIN_WRITE google.cloud.dataproc.v1.ClusterController.CreateCluster (LRO)
google.cloud.dataproc.v1.ClusterController.DeleteCluster (LRO)
google.cloud.dataproc.v1.ClusterController.DiagnoseCluster (LRO)
google.cloud.dataproc.v1.ClusterController.RepairCluster (LRO)
google.cloud.dataproc.v1.ClusterController.StartCluster (LRO)
google.cloud.dataproc.v1.ClusterController.StopCluster (LRO)
google.cloud.dataproc.v1.ClusterController.UpdateCluster (LRO)
google.cloud.dataproc.v1.JobController.CancelJob
google.cloud.dataproc.v1.JobController.DeleteJob
google.cloud.dataproc.v1.JobController.SubmitJob (LRO)
google.cloud.dataproc.v1.JobController.SubmitJobAsOperation (LRO)
google.cloud.dataproc.v1.JobController.UpdateJob
google.cloud.dataproc.v1.NodeGroupController.CreateNodeGroup (LRO)
google.cloud.dataproc.v1.NodeGroupController.RepairNodeGroup (LRO)
google.cloud.dataproc.v1.NodeGroupController.ResizeNodeGroup (LRO)
google.iam.v1.IAMPolicy.SetIamPolicy
google.longrunning.Operations.CancelOperation
google.longrunning.Operations.DeleteOperation

API 接口审核日志

如需了解如何针对每种方法评估权限以及评估哪些权限,请参阅 Managed Service for Apache Spark 和 Managed Service for Apache Spark 的 Identity and Access Management 文档。

google.cloud.dataproc.v1.ClusterController

以下审核日志与属于 google.cloud.dataproc.v1.ClusterController 的方法相关联。

CreateCluster

  • 方法:google.cloud.dataproc.v1.ClusterController.CreateCluster
  • 审核日志类型:管理员活动
  • 权限:
    • dataproc.autoscalingPolicies.use - ADMIN_READ
    • dataproc.clusters.create - ADMIN_WRITE
  • 方法是长时间运行的操作或流式传输操作:长时间运行的操作
  • 此方法的过滤条件: protoPayload.methodName="google.cloud.dataproc.v1.ClusterController.CreateCluster"

DeleteCluster

  • 方法:google.cloud.dataproc.v1.ClusterController.DeleteCluster
  • 审核日志类型:管理员活动
  • 权限:
    • dataproc.clusters.delete - ADMIN_WRITE
  • 方法是长时间运行的操作或流式传输操作:长时间运行的操作
  • 此方法的过滤条件: protoPayload.methodName="google.cloud.dataproc.v1.ClusterController.DeleteCluster"

DiagnoseCluster

  • 方法:google.cloud.dataproc.v1.ClusterController.DiagnoseCluster
  • 审核日志类型:管理员活动
  • 权限:
    • dataproc.clusters.use - ADMIN_WRITE
  • 方法是长时间运行的操作或流式传输操作:长时间运行的操作
  • 此方法的过滤条件: protoPayload.methodName="google.cloud.dataproc.v1.ClusterController.DiagnoseCluster"

GetCluster

  • 方法:google.cloud.dataproc.v1.ClusterController.GetCluster
  • 审核日志类型:数据访问
  • 权限:
    • dataproc.clusters.get - ADMIN_READ
  • 方法是长时间运行的操作或流式传输操作:否。
  • 此方法的过滤条件: protoPayload.methodName="google.cloud.dataproc.v1.ClusterController.GetCluster"

ListClusters

  • 方法:google.cloud.dataproc.v1.ClusterController.ListClusters
  • 审核日志类型:数据访问
  • 权限:
    • dataproc.clusters.list - ADMIN_READ
  • 方法是长时间运行的操作或流式传输操作:否。
  • 此方法的过滤条件: protoPayload.methodName="google.cloud.dataproc.v1.ClusterController.ListClusters"

RepairCluster

  • 方法:google.cloud.dataproc.v1.ClusterController.RepairCluster
  • 审核日志类型:管理员活动
  • 权限:
    • dataproc.clusters.update - ADMIN_WRITE
  • 方法是长时间运行的操作或流式传输操作:长时间运行的操作
  • 此方法的过滤条件: protoPayload.methodName="google.cloud.dataproc.v1.ClusterController.RepairCluster"

StartCluster

  • 方法:google.cloud.dataproc.v1.ClusterController.StartCluster
  • 审核日志类型:管理员活动
  • 权限:
    • dataproc.clusters.start - ADMIN_WRITE
  • 方法是长时间运行的操作或流式传输操作:长时间运行的操作
  • 此方法的过滤条件: protoPayload.methodName="google.cloud.dataproc.v1.ClusterController.StartCluster"

StopCluster

  • 方法:google.cloud.dataproc.v1.ClusterController.StopCluster
  • 审核日志类型:管理员活动
  • 权限:
    • dataproc.clusters.stop - ADMIN_WRITE
  • 方法是长时间运行的操作或流式传输操作:长时间运行的操作
  • 此方法的过滤条件: protoPayload.methodName="google.cloud.dataproc.v1.ClusterController.StopCluster"

UpdateCluster

  • 方法:google.cloud.dataproc.v1.ClusterController.UpdateCluster
  • 审核日志类型:管理员活动
  • 权限:
    • dataproc.clusters.update - ADMIN_WRITE
  • 方法是长时间运行的操作或流式传输操作:长时间运行的操作
  • 此方法的过滤条件: protoPayload.methodName="google.cloud.dataproc.v1.ClusterController.UpdateCluster"

google.cloud.dataproc.v1.JobController

以下审核日志与属于 google.cloud.dataproc.v1.JobController 的方法相关联。

CancelJob

  • 方法:google.cloud.dataproc.v1.JobController.CancelJob
  • 审核日志类型:管理员活动
  • 权限:
    • dataproc.jobs.cancel - ADMIN_WRITE
  • 方法是长时间运行的操作或流式传输操作:否。
  • 此方法的过滤条件: protoPayload.methodName="google.cloud.dataproc.v1.JobController.CancelJob"

DeleteJob

  • 方法:google.cloud.dataproc.v1.JobController.DeleteJob
  • 审核日志类型:管理员活动
  • 权限:
    • dataproc.jobs.delete - ADMIN_WRITE
  • 方法是长时间运行的操作或流式传输操作:否。
  • 此方法的过滤条件: protoPayload.methodName="google.cloud.dataproc.v1.JobController.DeleteJob"

GetJob

  • 方法:google.cloud.dataproc.v1.JobController.GetJob
  • 审核日志类型:数据访问
  • 权限:
    • dataproc.jobs.get - ADMIN_READ
  • 方法是长时间运行的操作或流式传输操作:否。
  • 此方法的过滤条件: protoPayload.methodName="google.cloud.dataproc.v1.JobController.GetJob"

ListJobs

  • 方法:google.cloud.dataproc.v1.JobController.ListJobs
  • 审核日志类型:数据访问
  • 权限:
    • dataproc.jobs.list - ADMIN_READ
  • 方法是长时间运行的操作或流式传输操作:否。
  • 此方法的过滤条件: protoPayload.methodName="google.cloud.dataproc.v1.JobController.ListJobs"

SubmitJob

  • 方法:google.cloud.dataproc.v1.JobController.SubmitJob
  • 审核日志类型:管理员活动
  • 权限:
    • dataproc.clusters.use - ADMIN_WRITE
    • dataproc.jobs.create - ADMIN_WRITE
  • 方法是长时间运行的操作或流式传输操作:长时间运行的操作
  • 此方法的过滤条件: protoPayload.methodName="google.cloud.dataproc.v1.JobController.SubmitJob"

SubmitJobAsOperation

  • 方法:google.cloud.dataproc.v1.JobController.SubmitJobAsOperation
  • 审核日志类型:管理员活动
  • 权限:
    • dataproc.clusters.use - ADMIN_WRITE
    • dataproc.jobs.create - ADMIN_WRITE
  • 方法是长时间运行的操作或流式传输操作:长时间运行的操作
  • 此方法的过滤条件: protoPayload.methodName="google.cloud.dataproc.v1.JobController.SubmitJobAsOperation"

UpdateJob

  • 方法:google.cloud.dataproc.v1.JobController.UpdateJob
  • 审核日志类型:管理员活动
  • 权限:
    • dataproc.jobs.update - ADMIN_WRITE
  • 方法是长时间运行的操作或流式传输操作:否。
  • 此方法的过滤条件: protoPayload.methodName="google.cloud.dataproc.v1.JobController.UpdateJob"

google.cloud.dataproc.v1.NodeGroupController

以下审核日志与属于 google.cloud.dataproc.v1.NodeGroupController 的方法相关联。

CreateNodeGroup

  • 方法:google.cloud.dataproc.v1.NodeGroupController.CreateNodeGroup
  • 审核日志类型:管理员活动
  • 权限:
    • dataproc.nodeGroups.create - ADMIN_WRITE
  • 方法是长时间运行的操作或流式传输操作:长时间运行的操作
  • 此方法的过滤条件: protoPayload.methodName="google.cloud.dataproc.v1.NodeGroupController.CreateNodeGroup"

GetNodeGroup

  • 方法:google.cloud.dataproc.v1.NodeGroupController.GetNodeGroup
  • 审核日志类型:数据访问
  • 权限:
    • dataproc.nodeGroups.get - ADMIN_READ
  • 方法是长时间运行的操作或流式传输操作:否。
  • 此方法的过滤条件: protoPayload.methodName="google.cloud.dataproc.v1.NodeGroupController.GetNodeGroup"

RepairNodeGroup

  • 方法:google.cloud.dataproc.v1.NodeGroupController.RepairNodeGroup
  • 审核日志类型:管理员活动
  • 权限:
    • dataproc.nodeGroups.update - ADMIN_WRITE
  • 方法是长时间运行的操作或流式传输操作:长时间运行的操作
  • 此方法的过滤条件: protoPayload.methodName="google.cloud.dataproc.v1.NodeGroupController.RepairNodeGroup"

ResizeNodeGroup

  • 方法:google.cloud.dataproc.v1.NodeGroupController.ResizeNodeGroup
  • 审核日志类型:管理员活动
  • 权限:
    • dataproc.nodeGroups.update - ADMIN_WRITE
  • 方法是长时间运行的操作或流式传输操作:长时间运行的操作
  • 此方法的过滤条件: protoPayload.methodName="google.cloud.dataproc.v1.NodeGroupController.ResizeNodeGroup"

google.iam.v1.IAMPolicy

以下审核日志与属于 google.iam.v1.IAMPolicy 的方法相关联。

GetIamPolicy

  • 方法:google.iam.v1.IAMPolicy.GetIamPolicy
  • 审核日志类型:数据访问
  • 权限:
    • dataproc.jobs.getIamPolicy - ADMIN_READ
  • 方法是长时间运行的操作或流式传输操作:否。
  • 此方法的过滤条件: protoPayload.methodName="google.iam.v1.IAMPolicy.GetIamPolicy"

SetIamPolicy

  • 方法:google.iam.v1.IAMPolicy.SetIamPolicy
  • 审核日志类型:管理员活动
  • 权限:
    • dataproc.clusters.setIamPolicy - ADMIN_WRITE
  • 方法是长时间运行的操作或流式传输操作:否。
  • 此方法的过滤条件: protoPayload.methodName="google.iam.v1.IAMPolicy.SetIamPolicy"

google.longrunning.Operations

以下审核日志与属于 google.longrunning.Operations 的方法相关联。

CancelOperation

  • 方法:google.longrunning.Operations.CancelOperation
  • 审核日志类型:管理员活动
  • 权限:
    • dataproc.batches.cancel - ADMIN_WRITE
    • dataproc.operations.cancel - ADMIN_WRITE
  • 方法是长时间运行的操作或流式传输操作:否。
  • 此方法的过滤条件: protoPayload.methodName="google.longrunning.Operations.CancelOperation"

DeleteOperation

  • 方法:google.longrunning.Operations.DeleteOperation
  • 审核日志类型:管理员活动
  • 权限:
    • dataproc.operations.delete - ADMIN_WRITE
  • 方法是长时间运行的操作或流式传输操作:否。
  • 此方法的过滤条件: protoPayload.methodName="google.longrunning.Operations.DeleteOperation"

GetOperation

  • 方法:google.longrunning.Operations.GetOperation
  • 审核日志类型:数据访问
  • 权限:
    • dataproc.operations.get - ADMIN_READ
  • 方法是长时间运行的操作或流式传输操作:否。
  • 此方法的过滤条件: protoPayload.methodName="google.longrunning.Operations.GetOperation"

ListOperations

  • 方法:google.longrunning.Operations.ListOperations
  • 审核日志类型:数据访问
  • 权限:
    • dataproc.operations.list - ADMIN_READ
  • 方法是长时间运行的操作或流式传输操作:否。
  • 此方法的过滤条件: protoPayload.methodName="google.longrunning.Operations.ListOperations"