Unity カタログでのデータ検出

データ検出は、組織全体のユーザーがカタログ内のデータ資産を検索、理解、および信頼する機能です。 管理者として、あなたは閲覧体験、タグ付けのメタデータや適用する信頼シグナル、そしてデータの意味を定義するセマンティックレイヤーを通じて発見可能性を形成します。 このページでは、Unity Catalogのデータ発見機能の概要と、それぞれの詳細なドキュメントへのリンクを提供しています。

発見ページ

Discoverページは、ユーザーがドメインやサブドメイン別、または資産タイプ別に整理されたデータ資産を見つけ、AI推奨の資産を探索できる厳選されたブラウジング体験です。 キュレーターは 組織にとって最も価値のある資産を整理し強調し、 消費者 がビジネスの理解に沿った形でデータを閲覧できるようにします。

発見ページを開くには、コンパスのアイコンをクリックしてください。サイドバーで発見してください

[検出] ページでドメイン別に参照する

ディスカバーページは、データ検索や整理のための複数の機能を統合しています:

  • ドメインとサブドメイン:関連資産をグループ化し、ユーザーがビジネスエリアごとにデータを閲覧できるようにするビジネスに合わせた階層構造です。
  • ページ:ビジネスの概念や用語を定義する管理されたページ。 Genie Oneは、ビジネス用語で答えを根拠に据える必要がある場合、これらのページを真実の出典として引用しています。
  • AI搭載の推薦:人気で価値のある資産が自動的に表示され、キュレーターが大規模に最良のデータをハイライトするのを助けます。
  • カスタムキュレーション:キュレーターが定義したセクションで、ドメインや組織全体の最も価値ある資産をハイライトし整理します。

以下のページを使って、 ディスカバー ページとその主要な機能について詳しく学びましょう。

ページ Description
Discover ページ ドメインや資産タイプごとにキュレーションされたデータ資産を閲覧し、カタログ全体で検索できます。
ドメインとサブドメイン データ資産をビジネスに合わせた階層構造に整理し、消費者がDiscoverページで閲覧できるようにします。
ページ ビジネスコンセプトを定義するページを作成し、Discoverページに表示します。

キュレーターと消費者のキャラクター

ユーザーは ディスカバー ページと2つのペルソナのいずれかでやり取りします。

  • キュレーター:ドメインの作成・管理、資産の割り当て、 Discover ページのカスタマイズ、組織内の他者がビジネス目的でデータを閲覧できるようにします。 ページの場合、キュレーターはドメイン内の任意のページを編集、公開、管理できます。 これらの操作には MANAGE DISCOVERY 権限が必要であり、アカウント管理者はアカウント、ドメイン、サブドメインレベルで権限を付与できます。 キュ レーターの権限をご参照ください。
  • 消費者: Discover ページを使ってドメインや資産タイプ別に整理されたキュレーションされたアセットを見つけ、AI推奨のアセットを探索します。 Pagesの場合、消費者はページを作成・公開し、アクセス可能なドメイン内の公開ページを閲覧、コメント、編集提案が可能です。 コンシューマー の手順を参照してください。

カタログ エクスプローラー

Discoverページがキュレーションされたデータのサブセットを示すのに対し、Catalog Explorerはカタログ内のすべてをビジネスに沿った階層ではなくカタログ階層で表示します。 これは、キュレーションされたビューでは表示されないオブジェクトのプロパティ、権限、サンプルデータ、系譜など、データオブジェクトを直接閲覧・検査するためのインターフェースです。 組織が推奨する資産を使いたい場合はDiscoverページを、完全な状況や特定のオブジェクトの検査・設定が必要な場合は Catalog Explorerに指示してください。

カタログ エクスプローラーを開くには、[データ] アイコンをクリックします。サイドバーのカタログ

カタログエクスプローラーのインターフェースで、カタログツリーと提案するオブジェクトのリストが表示されます

ページ Description
カタログ エクスプローラー Unityカタログのオブジェクトを閲覧・検査し、その詳細、権限、関係性を確認できます。
データベースオブジェクトの探索 カタログエクスプローラーでカタログ、スキーマ、テーブル、その他のデータベースオブジェクトを見つけて確認できます。

Unity カタログの意味論

Unity Catalogのセマンティクス は、カタログデータの上に標準的なビジネス指標、用語、組織構造を定義するためのツールのコレクションです。 これにより、組織とそのAIツールはデータの意味を一つの共通解釈に基づいて動作させることができます。 Unity カタログの意味論は以下のコンポーネントで構成されています:

  • メトリックビューは 再利用可能なビジネスKPIを定義し、管理します。
  • ドメインとサブドメインはDiscover ページで閲覧できるビジネスに合わせた階層構造に資産を整理します。
  • ページは 各ビジネスの概念や用語に権威ある定義を与えます。
  • 認証と廃止は 、組織が審査した資産と古い資産を示します。

これらの定義は 、Genie Ontologyの人間モデル層を構成しています。これは、あなたが明示的に定義し管理するビジネスコンテキストです。 Genie Oneは、このモデリングされたコンテキストと、あなたの資産や使用状況から自動的に推論されるコンテキストを組み合わせ、質問に答えるために活用する統一されたコンテキストレイヤーを形成します。

以下のページを使って、Unity Catalogの意味論とその構成要素について詳しく学びましょう:

ページ Description
指標表示 Unity Catalogオブジェクトとして一貫性があり再利用可能なビジネスKPIを定義し、管理します。
ドメインとサブドメイン データ資産をビジネスに合わせた階層構造に整理し、消費者がDiscoverページで閲覧できるようにします。
ページ 著者は、人々とGenie Oneのためのビジネスコンセプトを定義するページを管理していました。
認証済みまたは非推奨化されたフラグデータ どのデータ資産があなたの組織を信頼し、どのデータが古いかを明確に示しましょう。

タグ付け

タグ はUnity Catalogのセキュラブルオブジェクトに適用して整理・分類する属性で、データの検索やフィルタリングが容易になります。 ガバナンドタグでは、管理者が特定のタグキーをガバネッドとしてマークし、それぞれの許容値のセットを定義します。

例えば、ガバナンド sensitivity タグは publicinternal、または restrictedのみを許可する場合、同じタグがカタログ全体で同じように適用されます。

オブジェクトにガバナントタグを割り当てる

ページ Description
Unity Catalog のセキュリティ保護可能なオブジェクトにタグを適用する カタログオブジェクトにタグを適用・管理して、データを整理・分類しましょう。
統制タグ 特定のタグキーをガバネッドとしてマークし、一貫したタグ付けのために許可される値を定義してください。

系列

Lineage は、データがテーブル、列、AIアセット間でどのように流れているかを追跡するため、ユーザーはデータの出所や利用方法を追跡してから信頼できます。 Unity CatalogはAzure Databricks上で実行されるクエリの系譜を自動的にキャプチャし、Catalog Explorerで表示します。

カタログエクスプローラーにおける系譜グラフ

ページ Description
Unity Catalog のリネージ テーブル、カラム、ノートブック、その他の資産間でデータの流れをキャプチャし、確認できます。
外部の系列 Azure Databricksと外部システム間を移動するデータの系譜を追跡しましょう。

認証と廃止

データ資産を認証して組織の基準を満たしていることを示すことも、廃止して時代遅れで使用すべきでないと警告することもできます。 これらのシグナルはワークスペース内のアセットの隣に表示され、検索時の表示に影響を与えるため、ユーザーは使用前にアセットを信頼すべきかどうか判断できます。

例えば、データ資産の横に青いチェックマークがあると、認証済みであることを示します。

オブジェクトの認証ステータス

ページ Description
認証済みまたは非推奨化されたフラグデータ システムタグを適用して、資産を認証済みまたは非推奨としてマークしてください。