Схема и примеры запросов для экспорта данных о ресурсах Диска в BigQuery

Схема данных о ресурсах Диска, которые добавляются в набор данных BigQuery, приведена ниже.

* Относится к ярлыкам, назначенным объектам на Диске.

В таблице приведена схема полей, относящихся к общим дискам, в экспортируемых данных о ресурсах Диска.

Схема данных о внешнем доступе, которые добавляются в набор данных BigQuery (тот же набор данных, что и схема экспорта данных о ресурсах Диска), приведена ниже.

Соображения относительно производительности. Расчет полей внешнего доступа может занять больше времени, если у вас есть группы с несколькими вложенными пользователями. Из-за этого может быть задержка в обновлении данных, например в ежедневных отчетах.

Замените project_name.dataset_name названиями своего проекта и набора данных.

Результатом этого запроса будет таблица со следующими столбцами: идентификатор файла, название, адрес электронной почты владельца и тип.

SELECT id, title, mime_type, owner.user.email
FROM project_name.dataset_name
WHERE EXISTS (
  SELECT 1
  FROM UNNEST(access.permissions) AS permission
  WHERE permission.allow_file_discovery = true
)

Замените project_name.dataset_name названиями своего проекта и набора данных. Замените label_id идентификатором ярлыка, который можно узнать в Label Manager.

Результатом этого запроса будет таблица со следующими столбцами: идентификатор файла, название, адрес электронной почты владельца и тип.

SELECT id, title, mime_type, owner.user.email
FROM project_name.dataset_name
WHERE EXISTS (
  SELECT 1
  FROM UNNEST(applied_labels) AS label
  WHERE label.id = label_id
)

Замените project_name.dataset_name названиями своего проекта и набора данных. Замените threshold пороговым значением в МБ. Например, чтобы найти пользователей, у которых занято более 15 ГБ пространства на Диске, вторая с конца строка должна быть следующей: HAVING total_storage_mb > 15000.

Результатом этого запроса будет таблица со списком пользователей, отсортированным по занятому их данными пространству на Диске в МБ от большего к меньшему.

SELECT owner.user.email AS user_email,
  SUM(size_bytes) / (1000000) AS total_storage_mb
FROM project_name.dataset_name
GROUP BY user_email
HAVING total_storage_mb > threshold
ORDER BY total_storage_mb DESC

Замените project_name.dataset_name названиями своего проекта и набора данных.

Результатом этого запроса будет таблица со списком типов объектов, отсортированным от большего занимаемого пространства на Диске к меньшему.

SELECT mime_type, SUM(consumed_quota_bytes) AS total_consumed
FROM project_name.dataset_name
GROUP BY mime_type
ORDER BY total_consumed DESC

Замените project_name.dataset_name названиями своего проекта и набора данных.

SELECT id, owner.user.email, title
FROM project_name.dataset_name
WHERE mime_type LIKE '%.encrypted'

Замените project_name.dataset_name названиями своего проекта и набора данных. Замените user@example.com адресом электронной почты пользователя.

Примечание. С помощью этого запроса нельзя найти объекты, доступ к которым пользователь получил как участник группы или целевой аудитории.

SELECT id, title, mime_type, owner.user.email as owner_email
FROM project_name.dataset_name
WHERE EXISTS (
  SELECT 1
  FROM UNNEST(access.permissions) AS permissions
  WHERE permissions.email = user@example.com
)

Замените project_name.dataset_name названиями своего проекта и набора данных.

Результатом этого запроса будет таблица со столбцами "Название объекта на Диске" и "Название общего диска".

SELECT i.title, s.name
FROM project_name.dataset_name.inventory AS i
JOIN project_name.dataset_name.shared_drives AS s
ON i.owner.shared_drive.id = s.shared_drive_id;