背景・目的

AWS リソースタグについて整理してみたに引き続き、Databricksでタグをどのように活用できるかについても整理してみます。

まとめ

下記の特徴があります。

特徴	説明
概要	Unity Catalogのセキュリティ保護可能なオブジェクトに適用できる
管理できること	検索と検出が可能
対象	・カタログ・スキーマ・テーブル・ビュー
必要な権限	・Apply tag ・Use schema ・Use catalog
制約	・1 つのセキュリティ保護可能なオブジェクトに最大 20 個のタグを割り当て可能・タグの最大長は255文字・タグ名に特殊文字は使用できない・タグ名、値によるUnity Catalogテーブルの検索は完全一致のみ
検索性	検索ウインドウで探すことが可能。Information Schemaを使用してSQLで検索が可能

Databricksのドキュメントタグの適用をもとに整理します。

タグは、Unity Catalog のさまざまなセキュリティ保護可能なオブジェクトに適用できるキーとオプションの値を含む属性です。タグ付けは、メタストア内のさまざまなセキュリティ保護可能なオブジェクトを整理および分類する場合に便利です。タグを使用すると、データ資産の検索と検出も簡単になります。

セキュリティ保護可能なオブジェクトのタグ付けは、現在、カタログ、スキーマ、テーブル、ビュー、および登録済みモデルでサポートされています。セキュリティ保護可能なオブジェクトの詳細については、「 Unity Catalog のセキュリティ保護可能なオブジェクト」を参照してください。

Unity Catalog のセキュリティ保護可能なオブジェクトにタグを追加するには、オブジェクトに対する APPLY TAG 特権、オブジェクトの親スキーマに対する USE SCHEMA 特権、およびオブジェクトの親カタログに対する USE CATALOG 特権が必要です。

テーブルのカラムにもタグを付与できます。

スキーマにもタグを付けます。

カタログにもタグを付けます。

Unity Catalogで作成された各カタログでは、information_schemaが含まれている。
下記のテーブルが利用できます。

下記のクエリを実行します。

SELECT catalog_name, tag_name, tag_value
FROM system.information_schema.catalog_tags

下記のクエリを実行します。

SELECT catalog_name, tag_name, tag_value
FROM system.information_schema.COLUMN_TAGS

下記のクエリを実行します。

SELECT catalog_name, tag_name, tag_value
FROM system.information_schema.SCHEMA_TAGS

下記のクエリを実行します。

SELECT catalog_name, tag_name, tag_value
FROM system.information_schema.TABLE_TAGS

DatabricksのUnity Catalogのタグ機能を利用し、タグ付けと検索を試してみました。これにより、情報の管理が容易になり、より統制が効果的になると感じました。今後も積極的に活用していきたいと考えています。