问题标签 [google-cloud-dlp]

我在 BigQuery 表上运行 DLP jo，需要将结果（包括 PII 位置）存储在某处。正如我在文档中看到的，我可以将结果放到 BigQuery 中，但 DLP 使用流式插入会增加成本。同时批量加载到 BQ 是免费的。PubSub 和 Cloud Monitoring 的成本更高。

是否有任何便宜的选项来存储 DLP 结果？

我运行了一个 DLP 作业，将结果保存到 Data Catalog，并希望过滤 Data Catalog 中标准标记模板 ( Data Loss Prevention Tags) 具有值的条目Contains DLP findings: true。我知道如何使用 API 来做到这一点。但是有没有办法通过控制台 UI 按标签值过滤掉？

I have a scenario where, a table contains comments column which is free text. The comments column store user feedback and comments. I want to mask/deidentify it using Google Cloud Data Loss prevention API. While trying to deIdentify, I am observing that DLP API is deindetifying whole content of comment column and not sensitive content only. Example - if column contains 'My eamil id is xyz@abc.com' then I am get out as '** **** ** **...'

Here while sampling DLP api identifies email address as sensitive data in comments column.

I went through following example - Free text - https://cloud.google.com/dlp/docs/deidentify-sensitive-data and Table - https://cloud.google.com/dlp/docs/examples-deid-tables However I am looking for example where free text is part of column of specific table and while submitting DLP request I want to submit as whole table only and not separate free text only. Is there any kind of special handling required to achieve this ?

我正在使用 Google Cloud DLP (node.js) 从字符串中编辑电话号码（此字符串可以包含其他单词）。https://cloud.google.com/dlp/docs/samples/dlp-inspect-phone-number 例如我想编辑电话号码：Do transaction over phone to bypass fee. My number: 18776967786

但 Cloud DLP 仅使用国际格式编辑电话号码。例如+1-877-696-7786

有人知道遍历字符串和编辑可能的电话号码的好方法吗？

感谢帮助！

我正在尝试编写一个 Java CF HTTP 触发器，它接受数据集/表作为参数并运行预定义的 DLP 模板以提供需要存储在 Bigquery 中的检查输出。
目前，没有任何示例指令使用 Bigquery 作为操作输出。从我可以收集到的内容中，需要使用 OutputStorageConfig 或 StorageConfig 将输出操作设置为 Bigquery，但我正在寻找一些代码示例。
提前致谢。

我正在尝试使用 Terraform 在 GCP 中创建数据流。

在 Terraform 中，Dataflow 资源需要一个必填字段“template_gcs_path”，它指示去识别模板的 google 云存储路径。

我无法将此模板移动到谷歌云存储，因此无法使用 Terraform 创建 Dataflow 作业。

代码模板：

如何解决这个问题？

注意：我正在尝试使用 terraform 完成整个流程。

我可以使用 KMS 中生成的非对称密钥通过 Google DLP API 加密和解密数据吗？ https://cloud.google.com/kms/docs/creating-asymmetric-keys

我一次发送多个句子作为表格，并使用 inspect_content 查找每个句子的个人信息。

当我使用 inspect_content 函数时，我可以收到一系列包含各种信息的结果。

但是，我找不到每个检查结果来自哪一行。

我必须提供每个目标信息类型的原始文本和位置范围。

感谢您宝贵的时间^^

在此处输入图像描述

对于我们试图通过 Spark 作业处理数百万条记录的应用程序，默认设置为 600 req/min 的速率限制非常低。即使有 16 个节点和 4 个核心的集群，我们也达到了速率限制。我们计划让 25 个这样的作业并行运行。您能否建议如何将速率限制提高到每分钟 20k