DBMS_DCATパッケージ

DBMS_DCATパッケージには、Autonomous DatabaseユーザーがOCIデータ・カタログのデータ検出および一元化されたメタデータ管理システムを活用するのに役立つファンクションおよびプロシージャが用意されています。

データ・カタログは、データ・レイクのオブジェクト・ストレージ・アセットからメタデータを収集します。収集プロセスでは、論理エンティティが作成されます。論理エンティティは、列および関連するデータ型を持つ表とみなすことができます。DBMS_DCATプロシージャおよびファンクションは、Autonomous Databaseをデータ・カタログに接続し、アセットをデータベースと同期して、保護されたスキーマおよび外部表を作成します。その後、これらの外部表を使用してオブジェクト・ストアを問い合せて、Autonomous Databaseに格納されているデータと外部データを簡単に結合できます。これにより、管理プロセスが大幅に簡素化されます。複数のOCIサービス(Autonomous Databasesを含む)で共有される、一元管理された単一のメタデータ・ストアがあります。また、SQLを使用してデータ・カタログの内容を検査し、これらのデータ・カタログ・エンティティがAutonomous Databaseのスキーマおよび表にどのようにマップされるかを示すAutonomous Databaseディクショナリ・ビューもあります。

データ・カタログのユーザーおよびロール

DBMS_DCATパッケージは、同期されたユーザー/スキーマ、dcat_adminユーザーおよびローカル・ユーザーをサポートします。このパッケージを使用するには、dcat_syncロールが必要です。

データカタログユーザー

  • 同期されたユーザー/スキーマ

    同期された外部表は、データ・アセット/バケットの組合せに対応するデータベース・スキーマ、またはユーザーが設定したカスタム・プロパティに従って編成されます。同期されたスキーマは、データ・カタログの同期時に自動的に作成/削除されます。これらは、CREATE SESSION権限のない認証ユーザーとして作成されません。同期されたスキーマは、protected句を使用しても作成されるため、ローカル・ユーザー(PDB管理者でもない)によって変更できず、同期によってのみ変更できます。

  • ユーザーdcat_admin

    ユーザーdcat_adminは、同期を実行し、同期された表に対するREAD権限を他のユーザーまたはロールに付与できるローカル・データベース・ユーザーです。このユーザーは、CREATE SESSION権限のない認証なしユーザーとして作成されます。

  • ローカル・ユーザー

    外部表を問い合せるデータベース・ユーザーには、ユーザーdcat_adminまたはADMINによって、同期された外部表に対するREAD権限が明示的に付与されている必要があります。デフォルトでは、同期の完了後、ユーザーdcat_adminおよびADMINのみが同期された外部表にアクセスできます。

データ・カタログ・ロール

  • dcat_sync

    dcat_syncロールには、DBMS_DCATパッケージの使用に必要なすべての権限があります。データ・カタログのナビゲートおよび同期の実行にAPIを使用できるようにするには、ユーザーにこのロールが必要です。

必要な資格証明およびIAMポリシー

このトピックでは、Autonomous Databaseユーザーにデータ・カタログの管理およびオブジェクト・ストレージからの読取り権限を付与するために必要なOracle Cloud Infrastructure Identity and Access Management (IAM)ユーザー資格証明およびポリシーについて説明します。

OCIデータ・カタログの資格証明およびポリシー要件:

AWS Glueデータカタログの資格およびポリシー要件

Amazon Web Services (AWS) Glueデータ・カタログにアクセスしてS3オブジェクト・ストレージから読み取る権限をAutonomous Databaseユーザーに付与するには、次のユーザー資格証明およびポリシーが必要です:
  • AWS Glueデータカタログにアクセスする権限を持つ資格オブジェクトが必要です。資格証明の管理の詳細は、Access ManagementのDBMS_CLOUDを参照してください。

    AWS Glueデータカタログにアクセスするには、glue:GetDatabases、glue:GetTables、glue:GetTableの各権限が必要です。

    さらに、基礎となるS3オブジェクトを指す解決可能なHTTPS URLを生成するには、同期中に権限s3:GetBucketLocationが必要です。
  • Autonomous Databaseでデータ・ファイルを問い合せるには、S3に格納されているファイルにアクセスする権限を持つ資格証明オブジェクトが必要です。
  • AWS資格証明がサポートされています。AWS Amazon Resource Name (ARN)資格証明はサポートされていません。

例: OCIネイティブ認証資格証明オブジェクトの作成

この例では、データ・カタログまたはオブジェクト・ストア資格証明オブジェクトの作成時に使用できるOCIネイティブ認証資格証明を作成します。詳細は、DBMS_DCAT SET_DATA_CATALOG_CREDENTIALプロシージャおよびDBMS_DCAT SET_OBJECT_STORE_CREDENTIALプロシージャをそれぞれ参照してください。

OCIネイティブ認証では、DBMS_CLOUD.CREATE_CREDENTIALプロシージャにパラメータcredential_nameuser_ocidtenancy_ocidprivate_keyおよびfingerprintが含まれています。このプロシージャの詳細は、DBMS_CLOUD CREATE_CREDENTIALプロシージャを参照してください。

credential_nameは、資格証明オブジェクトの名前です。user_ocidおよびtenancy_ocidパラメータは、それぞれユーザーのOCIDおよびテナンシのOCIDsに対応します。

private_keyパラメータは、生成された秘密キーをPEM形式で指定します。パスフレーズ付きで作成した秘密キーはサポートされていません。したがって、パスフレーズなしで鍵を生成する必要があります。パスフレーズなしで秘密キーを作成する方法の詳細は、API署名キーの生成方法を参照してください。また、このパラメータに指定する秘密キーには、ヘッダーまたはフッターなしのキー自体のみを含める必要があります(例: '-----BEGIN RSA PRIVATE KEY-----'、'-----END RSA PRIVATE KEY-----')。

fingerprintパラメータは、公開キーをコンソールにアップロードした後、またはOpenSSLコマンドを使用して取得されるフィンガープリントを指定します。フィンガープリントの取得の詳細は、「公開キーのアップロード方法」および「キーのフィンガープリントの取得方法」を参照してください。

必要な情報がすべて収集され、秘密キーが生成されると、次のCREATE_CREDENTIALプロシージャを実行する準備が整います。

BEGIN
  DBMS_CLOUD.CREATE_CREDENTIAL (
    credential_name => 'OCI_NATIVE_CRED',
    user_ocid              => 'ocid1.user.oc1..aaaaaaaatfn77fe3fxux3o5lego7glqjejrzjsqsrs64f4jsjrhbsk5qzndq',
    tenancy_ocid           => 'ocid1.tenancy.oc1..aaaaaaaapwkfqz3upqklvmelbm3j77nn3y7uqmlsod75rea5zmtmbl574ve6a',
    private_key            => 'MIIEogIBAAKCAQEA...t9SH7Zx7a5iV7QZJS5WeFLMUEv+YbYAjnXK+dOnPQtkhOblQwCEY3Hsblj7Xz7o=',
    fingerprint            => '4f:0c:d6:b7:f2:43:3c:08:df:62:e3:b2:27:2e:3c:7a');
END;
/
資格証明オブジェクトを作成すると、dba_credentials表に表示されます。
SELECT owner, credential_name
FROM dba_credentials 
WHERE credential_name LIKE '%NATIVE%';

OWNER CREDENTIAL_NAME
----- ---------------
ADMIN OCI_NATIVE_CRED

例: Autonomous Databaseリソース・プリンシパルの使用

この例では、適切なリソース・メンバーを含む動的グループが作成され、動的グループにはデータ・カタログを管理する権限が付与され、動的グループにはオブジェクト・ストレージからの読取り権限が付与されます。

  1. adb-grp-1という名前の動的グループを作成します。リソース・メンバーとしてOCIDがocid1.autonomousdatabase.oc1.iad.abuwcljr...fjkfeのAutonomous Databaseインスタンスを含む一致ルールをadb-grp-1に追加します。

    動的グループ一致ルール:

    resource.id = 'ocid1.autonomousdatabase.oc1.iad.abuwcljr...fjkfe'
  2. mycompartmentコンパートメントで、データ・カタログ・インスタンスへのフル・アクセス権をadb-grp-1動的グループに付与するポリシーを定義します。

    allow dynamic-group adb-grp-1 to manage data-catalog-family in compartment mycompartment
  3. adb-grp-1 動的グループがmycompartmentという名前のコンパートメント内のバケットを読み取ることを許可するポリシーを定義します。
    allow dynamic-group adb-grp-1 to read objects in compartment mycompartment

例: ユーザー・プリンシパルの使用

この例では、user1はグループadb-adminsのメンバーです。このグループのすべてのメンバーには、mycompartment内のすべてのデータ・カタログを管理し、mycompartmentのオブジェクト・ストアから読み取る権限が付与されます。

  1. adb-adminsのメンバーであるユーザーに、mycompartment内のすべてのデータ・カタログの管理を許可します。
    allow group adb-admins to manage data-catalog-family in compartment mycompartment
  2. adb-adminsのメンバーであるユーザーに、mycompartment内の任意のバケット内のオブジェクトの読取りを許可します。
    allow group adb-admins to read objects in compartment mycompartment

接続管理サブプログラムの要約

この表は、データ・カタログ接続の作成、問合せおよび削除に使用されるDBMS_DCATパッケージ・プロシージャを示しています。

サブプログラム 摘要
SET_DATA_CATALOG_CONNプロシージャ 指定されたデータ・カタログへの接続の作成
SET_DATA_CATALOG_CREDENTIALプロシージャ データ・カタログへの特定の接続で使用されるデータ・カタログ・アクセス資格証明の設定
SET_OBJECT_STORE_CREDENTIALプロシージャ オブジェクト・ストアにアクセスするために指定された一意の接続識別子によって使用される資格証明を設定します
UNSET_DATA_CATALOG_CONNプロシージャ 既存のデータ・カタログ接続の削除

SET_DATA_CATALOG_CREDENTIALプロシージャ

このプロシージャは、データ・カタログへの特定の接続で使用されるデータ・カタログ・アクセス資格証明を設定します。

構文

PROCEDURE DBMS_DCAT.SET_DATA_CATALOG_CREDENTIAL(
    credential_name VARCHAR2(128) DEFAULT NULL,
    dcat_con_id     VARCHAR2 DEFAULT NULL
  );

パラメータ

パラメータ 摘要

credential_name

(オプション)データ・カタログへのアクセスに使用される資格証明。

dcat_con_id 一意のデータ・カタログ接続識別子。この資格証明は、dcat_con_idで識別される接続に使用されます。デフォルトはNullです。

使用法

この資格証明には、データ・カタログの管理権限が必要です。データ・カタログ・ポリシーを参照してください。デフォルトはリソース・プリンシパルです。ポリシーおよびロールの構成によるクラウド・リソースへのアクセスを参照してください。

SET_OBJECT_STORE_CREDENTIALプロシージャ

このプロシージャは、オブジェクト・ストアにアクセスするために指定された一意の接続識別子によって使用される資格証明を設定します。オブジェクト・ストア・アクセス資格証明を変更すると、新しい資格証明を使用するように既存のすべての同期表が変更されます。

構文

PROCEDURE DBMS_DCAT.SET_OBJECT_STORE_CREDENTIAL(
    credential_name  VARCHAR2(128),
    dcat_con_id      IN VARCHAR2 DEFAULT NULL
  );

パラメータ

パラメータ 摘要

credential_name

オブジェクト・ストアにアクセスするために外部表で使用される資格証明。

dcat_con_id 一意のデータ・カタログ接続識別子。デフォルト値はNULLです。

SET_DATA_CATALOG_CONNプロシージャ

このプロシージャは、指定されたデータ・カタログへの接続を作成します。メタデータとデータ・カタログを同期するには、接続が必要です。Autonomous Databaseインスタンスは、複数のデータ・カタログ・インスタンスに接続でき、OCIデータ・カタログおよびAWS Glueデータ・カタログへの接続をサポートします。

構文

PROCEDURE DBMS_DCAT.SET_DATA_CATALOG_CONN (
   region       VARCHAR2 DEFAULT NULL,
   endpoint     VARCHAR2 DEFAULT NULL,
   catalog_id   VARCHAR2 DEFAULT NULL,
   dcat_con_id  VARCHAR2 DEFAULT NULL,
   catalog_type VARCHAR2 DEFAULT NULL
 );

パラメータ

パラメータ 摘要

region

「データ・カタログ」リージョン。endpointが指定されている場合、regionはオプションです。endpointregionの両方が指定されている場合は、endpointが優先されます。デフォルトはNULLです。

endpoint

データ・カタログ・エンドポイント。regionが指定されている場合、endpointはオプションです。endpointregionの両方が指定されている場合は、endpointが優先されます。デフォルトはNULLです。

catalog_id

データ・カタログ・インスタンスの一意のOracle Cloud Identifier (OCID)。AWS Glueデータ・カタログに接続する場合、catalog_idはオプションです。

dcat_con_id 一意のデータ・カタログ接続識別子。この識別子は、複数のデータ・カタログに接続する場合に必要であり、1つのみに接続する場合はオプションです。後続のコールまたはビューの問合せ時に、データ・カタログ接続を参照するために使用されます。識別子が指定されていない場合、このプロシージャはNULL接続識別子を生成します。dcat_con_idには、次の制限が適用されます。
  • Autonomous Databaseインスタンス内で一意である必要があります。
  • 先頭は文字にする必要があります。
  • これには、英数字、アンダースコア(_)、ドル記号($)およびポンド記号(#)を含めることができます。
  • 16文字以上の長さにする必要があります。
catalog_type 接続するデータ・カタログのタイプ。指定できる値:
  • OCI_DCAT - OCIデータ・カタログ
  • AWS_GLUE - AWS Glueデータ・カタログ
  • NULL - 指定されたリージョンまたはエンドポイントからカタログ・タイプが自動的に検出されます。

使用法

このプロシージャをコールする必要があるのは、接続を設定するために1回のみです。接続プロセスの一部として、Autonomous Databaseはカスタム・プロパティをデータ・カタログに追加します。これらのカスタム・プロパティには、データ・カタログ・ユーザーがアクセスでき、デフォルト名(スキーマ、表および列の場合)および列データ型をオーバーライドできます。

接続を作成する前に、資格証明を作成して設定する必要があります。接続プロセスの詳細は、OCIデータ・カタログの「データ・カタログを使用した一般的なワークフロー」およびAWS Glueデータ・カタログの「AWS Glueデータ・カタログを使用した問合せのユーザー・ワークフロー」を参照してください。

例: 既知のOCIDとの接続

この例では、Autonomous Databaseはuk-london-1リージョンのデータ・カタログに接続しています。catalog_idパラメータでは、データ・カタログ・インスタンスにOracle Cloud Identifier (ocid)を使用します。データ・カタログのタイプ(AWS Glue Data CatalogまたはOCI Data Catalog)が自動的に決定されます。

BEGIN
  DBMS_DCAT.SET_DATA_CATALOG_CONN(
    region=>'uk-london-1',
    catalog_id=>'ocid1.datacatalog.oc1.uk-london-1...');
END;
/

例: AWS Glueデータカタログへの接続

接続とは、Autonomous DatabaseインスタンスとAWS Glueデータ・カタログとの間の関連付けです。接続に成功すると、Autonomous DatabaseインスタンスはAWS Glueと同期できます。各AWSアカウントには、リージョンごとに1つのAWS Glue Data Catalogがあり、各カタログには、各リージョンに対応するサービス・エンドポイントを使用してアクセスできます。Autonomous Databaseインスタンスは、API DBMS_DCAT.SET_DATA_CATALOG_CONNを起動し、カタログが存在するリージョンのエンドポイントを指定することで、AWS Glueデータ・カタログに関連付けることができます。

AWS Glueエンドポイントおよび割当て制限を参照してください。

この例では、Autonomous Databaseは、uk-london-1リージョンのAWS Glue Data Catalogに接続しています。これはAWS Glue Data Catalog接続であるため、catalog_idパラメータは必要ありません。

BEGIN
  DBMS_DCAT.SET_DATA_CATALOG_CONN(
    region=>'uk-london-1',
    catalog_type=>'AWS_GLUE'
END;
/

UNSET_DATA_CATALOG_CONNプロシージャ

このプロシージャは、既存のデータ・カタログ接続を削除します。

構文

ノート

このプロシージャを起動すると、以前の同期の一部として作成された保護スキーマおよび外部表がすべて削除されます。データ・カタログのメタデータには影響しません。
PROCEDURE DBMS_DCAT.UNSET_DATA_CATALOG_CONN (
    dcat_con_id IN VARCHAR2 DEFAULT NULL
);

パラメータ

パラメータ 摘要
dcat_con_id 一意のデータ・カタログ接続識別子。デフォルトはNullです。

同期サブプログラムの要約

同期の実行、同期ジョブの作成と削除、および同期スキーマの削除は、この表に示す手順で実行できます。

ノート

2022年4月4日に、DBMS_DCAT.RUN_SYNCプロシージャにsync_optionおよびgrant_readパラメータが追加されました。その日付より前に作成されたスケジュール済同期ジョブのパフォーマンスを正しく確認するには、スケジュール済同期ジョブを削除して再作成する必要があります。DBMS_DCAT.DROP_SYNC_JOBプロシージャおよびDBMS_DCAT.CREATE_SYNC_JOBプロシージャを参照してください。
サブプログラム 摘要
CREATE_SYNC_JOBプロシージャ RUN_SYNCを定期的に起動するスケジューラ・ジョブを作成します
DROP_SYNC_JOBプロシージャ 指定された一意の接続識別子の既存の同期ジョブを削除します
DROP_SYNCED_SCHEMASプロシージャ 指定された一意の接続識別子について、以前に同期されたすべてのスキーマを削除します
RUN_SYNCプロシージャ 同期操作の実行

RUN_SYNCプロシージャ

このプロシージャは同期操作を実行し、同期のエントリ・ポイントです。入力として、選択したデータ・カタログ・アセット、フォルダおよびエンティティのリストを取得し、外部表を作成、削除および変更してマテリアライズします。

sync_optionパラメータは、RUN_SYNCプロシージャが実行する操作(SYNCDELETEまたはREPLACE)を指定します。この操作は、synced_objectsパラメータのスコープ内のエンティティに対して実行されます。

RUN_SYNCプロシージャへのすべてのコールは、USER_LOAD_OPERATIONSビューを問い合せて同期のステータスおよび対応するlog_tableに関する情報を取得するために使用できる一意のoperation_idを返します。DBMS_DCAT$SYNC_LOGビューを問い合せると、現行のユーザーが最後に実行した同期操作のlog_tableに簡単にアクセスできます。詳細は、DBMS_DCAT$SYNC_LOGビューおよびロードの監視およびトラブルシューティングを参照してください。

ノート

2022年4月4日に、RUN_SYNCプロシージャにsync_optionおよびgrant_readパラメータが追加されました。その日付より前に作成されたスケジュール済同期ジョブのパフォーマンスを正しく確認するには、スケジュール済同期ジョブを削除して再作成する必要があります。DBMS_DCAT.DROP_SYNC_JOBプロシージャおよびDBMS_DCAT.CREATE_SYNC_JOBプロシージャを参照してください。

パーティション化された論理エンティティまたはグルー表の同期

RUN_SYNCプロシージャは、次の3つすべてが当てはまる場合に、論理エンティティまたはGlue表ごとにパーティション化された外部表を作成します。

  1. OCIデータ・カタログ論理エンティティまたはGlue表には、1つ以上のパーティション属性があります。
  2. OCIデータ・カタログの場合、論理エンティティは接頭辞ベースのファイル名パターンから導出されます。正規表現ベースのパターンから導出されたパーティション化された論理エンティティはサポートされていません。
  3. OCIデータ・カタログの場合、論理エンティティは、ハイブ・スタイルまたはハイブ以外のフォルダ形式に従ったパーティション・データに基づきます。オブジェクト名を使用した非ハイブ・スタイル形式に従ったパーティション・データに基づく論理エンティティはサポートされていません。
    • 例1。Hiveスタイルのパーティション化形式に接頭辞ベースのファイル名パターンが付いた、収集されたオブジェクトに基づく論理エンティティ。

      次のオブジェクトについて考えてみます。
      Bucket: MYBUCKET
      cluster1/db1.db/sales/country=USA/year=2020/month=01/sales1.csv
      cluster1/db1.db/sales/country=USA/year=2020/month=01/sales2.csv
      cluster1/db1.db/sales/country=USA/year=2020/month=02/sales1.csv

      開始フォルダ接頭辞がcluster1/db1.dbのファイル名パターンを使用してバケットを収集すると、countryyearおよびmonthの3つのパーティション属性を持つSALESという名前の論理エンティティが生成されます。パーティション属性のタイプはPartitionで、非パーティション属性のタイプはPrimitiveです。

    • 例2。接頭辞ベースのファイル名パターンを持つHive以外のスタイル・パーティション化形式に従った、収集されたオブジェクトに基づく論理エンティティ。
      次のオブジェクトについて考えてみます。
      Bucket: MYBUCKET
      cluster2/db2.db/sales/USA/2020/01/sales1.csv
      cluster2/db2.db/sales/USA/2020/01/sales2.csv
      cluster2/db2.db/sales/USA/2020/02/sales1.csv

      開始フォルダ接頭辞がcluster2/db2.dbのファイル名パターンを使用してバケットを収集すると、name0、name1およびname2の3つのパーティション属性を持つSALESという名前の論理エンティティが生成されます。生成された論理エンティティと例1の違いは、パーティション化された属性の名前が自動生成され、例1ではURL (countryyearおよびmonth)から抽出される点のみです。

パーティション化された論理エンティティの同期の完全なエンドツーエンドの例については、例: パーティション化されたデータ・シナリオを参照してください。

パーティション化された論理エンティティ/グルー表の増分同期

RUN_SYNCプロシージャをコールするたびに、データベースと同期するOCIデータ・カタログ論理エンティティまたはAWS Glue表のセットを指定します。論理エンティティまたはグルー表が2つのRUN_SYNCコールに存在する場合、2番目のコールは既存の外部表を保持し、場合によっては変更します。次の表に、論理エンティティまたはグルー表がパーティション化されている場合にサポートされる論理エンティティまたはグルー表の変更を示します。

論理エンティティまたはグルー表の変更 アクション

パーティションの追加、削除または更新

データ・カタログで変更が検出されたかどうかに関係なく、外部パーティション表のすべてのパーティションが更新されます。

パーティション化された属性の追加

外部パーティション表へのパーティション列の追加はサポートされていません。例外が発生しています。

パーティション属性の削除

外部パーティション表からのパーティション列の削除はサポートされていません。例外が発生しています。

パーティション化された属性の名前変更

外部パーティション表のパーティション列名の変更はサポートされていません。例外が発生しています。

構文

PROCEDURE DBMS_DCAT.RUN_SYNC (
    synced_objects   IN  CLOB,
    sync_option      IN VARCHAR2 DEFAULT 'SYNC',
    error_semantics  IN VARCHAR2 DEFAULT 'SKIP_ERRORS',
    log_level        IN VARCHAR2 DEFAULT 'INFO',
    grant_read       IN VARCHAR2 DEFAULT NULL,
    dcat_con_id      IN VARCHAR2 DEFAULT NULL
 );
PROCEDURE DBMS_DCAT.RUN_SYNC (
    synced_objects   IN  CLOB,
    sync_option      IN VARCHAR2 DEFAULT 'SYNC',
    error_semantics  IN VARCHAR2 DEFAULT 'SKIP_ERRORS',
    log_level        IN VARCHAR2 DEFAULT 'INFO',
    grant_read       IN VARCHAR2 DEFAULT NULL,
    operation_id     OUT NOCOPY NUMBER,
    dcat_con_id      IN VARCHAR2 DEFAULT NULL
 );

パラメータ

パラメータ 摘要

synced_objects

このパラメータは、同期するデータ・カタログ・オブジェクトを指定するJSONドキュメントです。

OCIデータ・カタログの場合、JSONドキュメントでは、データ・アセット、フォルダ(オブジェクト・ストア・バケット)または論理エンティティなど、複数の粒度のエンティティのセットを指定します。これには、アセット・オブジェクトの配列であるasset_list、またはカタログ内のすべての(オブジェクト・ストア)データ・アセットの同期を表す単一の*文字列を含む配列が含まれます。

AWS Glue Data Catalogsの場合、JSONドキュメントでは、データベース、表など、複数の粒度の表のリストを指定します。ドキュメントはデータベースのリストを指定します。ユーザーは、データベース内の個々の表を指定することで、同期する表のセットを制限できます。

sync_option (オプション)次の3つのオプションがあります。
  • SYNC (デフォルト) - このオプションにより、synced_objectsスコープを介してデータ・カタログ内の内容がAutonomous Databaseで表されます。論理エンティティまたはGlue表が、最後の同期操作以降にデータ・カタログから削除された場合は、Autonomous Databaseで削除されます。synced_objectsスコープに対して、次の操作が実行されます。
    • 新規データ・カタログ・エンティティの表を追加します
    • 削除されたデータ・カタログ・エンティティの表を削除します
    • 既存の表のプロパティ(名前、列、データ型など)を更新します。
  • DELETE - synced_objectsスコープ内の表を削除します。
  • REPLACE - 現在同期されているすべてのオブジェクトを、synced_objectsスコープ内のオブジェクトに置き換えます。

error_semantics

(オプション)このパラメータは、エラー動作を指定します。SKIP_ERRORSに設定すると、個々のエンティティでエラーが発生したにもかかわらず、同期は続行されます。STOP_ON_ERRORに設定すると、プロシージャは最初に検出されたエラーで失敗します。デフォルトはSKIP_ERRORSです。

log_level

(オプション)このパラメータは、ロギング詳細の増加レベルで次の値を指定します: (OFFFATALERRORWARNINFODEBUGTRACEALL)。デフォルトはINFOです。
grant_read (オプション)このパラメータは、このRUN_SYNCの起動によって処理されるすべての外部表に対するREAD権限が自動的に付与されるユーザー/ロールのリストです。grant_readリスト内のすべてのユーザー/ロールには、synced_objectsパラメータで指定されたエンティティに対応するすべての新規または既存の外部表に対するREAD権限が付与されます。RUN_SYNCプロシージャは、同期された外部表に対するすでに付与されている権限を保持します。

operation_id

(オプション)このパラメータは、同期に対応するエントリをUSER_LOAD_OPERATIONSで検索し、ログ表の名前を決定するために使用されます。

ノート: operation_idを返さないバージョンのRUN_SYNCを使用できるため、ユーザーは最新の同期についてUSER_LOAD_OPERATIONSを問い合せることができます。

dcat_con_id このパラメータは、データ・カタログへの接続の作成時に指定された一意のデータ・カタログ接続識別子です。DBMS_DCAT SET_DATA_CATALOG_CONNプロシージャを参照してください。このパラメータは、同期に使用される接続を識別し、導出スキーマ名の一部になります。スキーマ名の導出方法の詳細は、「同期マッピング」を参照してください。パラメータのデフォルトはNULLです。

例: すべてのOCIデータ・カタログ・エンティティの同期

次の例では、すべてのデータ・カタログ・エンティティが同期されます。

EXEC DBMS_DCAT.RUN_SYNC(synced_objects=>'{"asset_list":["*"]}');

例: すべてのOCIデータ・カタログ・データ・アセットを同期するためのsynced_objectsパラメータ

次に、データ・カタログ内のすべての(オブジェクト・ストレージ)データ・アセットを同期するためのsynced_objectsパラメータの例を示します。

{"asset_list" : ["*"]}

例: 特定のOCIデータ・カタログ・データ・アセットを同期するためのsynced_objectsパラメータ

次に、2つのデータ・アセットを同期するためのsynced_objectsパラメータの例を示します。

{"asset_list": [
        {
            "asset_id":"0b320de9-8411-4448-91fb-9e2e7f78fd5f"
        },
        {
            "asset_id":"0b320de9-8411-4448-91fb-9e2e7f74523"
        }
    ]}

例: データ・アセット内の特定のOCIデータ・カタログ・エンティティを同期するためのsynced_objectsパラメータ

次に、データ・アセット内の2つのエンティティを同期するためのsynced_objectsパラメータの例を示します。

{"asset_list": [
        {
            "asset_id":"0b320de9-8411-4448-91fb-9e2e7f78fd5f",
            "folder_list":[
                "f1",         
                "f2" 
           ]
        }   
    ]}

例: データ・アセット内の特定のOCIデータ・カタログ・フォルダおよびエンティティを同期するためのsynced_objectsパラメータ

次に、データ・アセット内の2つのフォルダと2つのエンティティを同期するためのsynced_objectsパラメータの例を示します。

{"asset_list":[
        {
            "asset_id":"0b320de9-8411-4448-91fb-9e2e7f78fd5f",
            "entity_list": [
                "entity1",     
                "entity2"
            ],
             "folder_list": [
                "f1",         
                "f2"
            ]
        }   
    ]}

例: すべてのAWS Glueデータ・カタログ・データベースを同期するためのsynced_objectsパラメータ

次に、AWS Glue Data Catalogのすべてのデータベースを同期するためのsynced_objectsパラメータの例を示します。

{"database_list":["*"]}

例: 2つのAWS Glueデータ・カタログ・データベースを同期するためのsynced_objectsパラメータ

次に、2つのAWS Glue Data Catalogデータベースを同期するためのsynced_objectsパラメータの例を示します。

{"database_list":[
    {"database":"tpcdscsv"},
    {"database":"tpcdsparquet"} ]}

例: 3つのAWS Glueデータ・カタログ・データベースを同期するためのsynced_objectsパラメータ

次に、AWS Glue Data Catalogデータベースの3つの表を同期するためのsynced_objectsパラメータの例を示します。

{"database_list":[
 {"database":"tpcdsparquet",
     "table_list": [ "tpcdsparquet_customer",
                     "tpcdsparquet_item",
                     "tpcdsparquet_web_sales" ] } ]}

CREATE_SYNC_JOBプロシージャ

このプロシージャは、RUN_SYNCを定期的に起動するスケジューラ・ジョブを作成します。

入力として、同期するオブジェクトのセット、エラー・セマンティクス、ログ・レベルおよび繰返し間隔を取ります。同期の動作の詳細は、DBMS_DCAT RUN_SYNCプロシージャを参照してください。

同期ジョブは1つのみです。forceパラメータがTRUEに設定されていないかぎり、別のジョブがすでに指定されている場合、CREATE_SYNC_JOBプロシージャは失敗します。forceをTRUEに設定すると、前のジョブが削除されます。

スケジューラ・ジョブが別の同期の進行中に実行しようとすると、スケジューラ・ジョブは失敗します。

ノート

2022年4月4日に、RUN_SYNCプロシージャにsync_optionおよびgrant_readパラメータが追加されました。その日付より前に作成されたスケジュール済同期ジョブのパフォーマンスを正しく確認するには、スケジュール済同期ジョブを削除して再作成する必要があります。DBMS_DCAT.DROP_SYNC_JOBプロシージャおよびDBMS_DCAT.CREATE_SYNC_JOBプロシージャを参照してください。

構文

PROCEDURE DBMS_DCAT.CREATE_SYNC_JOB (
    synced_objects   IN CLOB,
    error_semantics  IN VARCHAR2 DEFAULT 'SKIP_ERRORS',
    log_level        IN VARCHAR2 DEFAULT 'INFO',
    repeat_interval  IN VARCHAR2,
    force            IN VARCHAR2 DEFAULT 'FALSE',
    grant_read       IN VARCHAR2 DEFAULT NULL,
    sync_option      IN VARCHAR2 DEFAULT 'SYNC',
    dcat_con_id      IN VARCHAR2 DEFAULT NULL
);

パラメータ

パラメータ 摘要

synced_objects

RUN_SYNCプロシージャで説明されているように、同期するオブジェクトを指定するJSONオブジェクト。

error_semantics

(オプション) RUN_SYNCに指定されたエラー動作。デフォルトはSKIP_ERRORSです。

log_level

(オプション)RUN_SYNCに指定されているロギング・レベル。デフォルトはINFOです。

repeat_interval

ジョブの間隔を繰り返し、DBMS_SCHEDULER.CREATE_JOBプロシージャの繰返し間隔パラメータと同じセマンティクスを使用します。repeat_intervalの詳細は、ジョブの作成の概要を参照してください。

force

(オプション) TRUEの場合、既存の同期ジョブが最初に削除されます。FALSEの場合、同期ジョブがすでに存在すると、CREATE_SYNC_JOBプロシージャは失敗します。デフォルトはFALSEです。

grant_read (オプション)プロシージャRUN_SYNCの説明に従って、同期された外部表にREADが付与されるユーザー/ロールのリスト。DBMS_DCAT.RUN_SYNCプロシージャを参照してください。
sync_option (オプション)プロシージャRUN_SYNCの説明に従って、前のRUN_SYNC操作を介してすでに同期されているエンティティに関する動作。DBMS_DCAT.RUN_SYNCプロシージャを参照してください。
dcat_con_id このパラメータは、データ・カタログへの接続の作成時に指定された一意のデータ・カタログ接続識別子です。DBMS_DCAT SET_DATA_CATALOG_CONNプロシージャを参照してください。このパラメータは、同期に使用される接続を識別し、導出スキーマ名の一部になります。スキーマ名の導出方法の詳細は、「同期マッピング」を参照してください。パラメータのデフォルトはNULLです。

DROP_SYNC_JOBプロシージャ

このプロシージャは、指定された一意の接続識別子の既存の同期ジョブを削除します。

構文

PROCEDURE DBMS_DCAT.DROP_SYNC_JOB (
    dcat_con_id IN VARCHAR2 DEFAULT NULL
  );

パラメータ

パラメータ 摘要
dcat_con_id 一意のデータ・カタログ接続識別子。デフォルト値はNULLです。

DROP_SYNCED_SCHEMASプロシージャ

このプロシージャは、指定された一意の接続識別子について、以前に同期されたすべてのスキーマを削除します。

構文

PROCEDURE DBMS_DCAT.DROP_SYNCED_SCHEMAS (
    dcat_con_id IN VARCHAR2 DEFAULT NULL
  );

パラメータ

パラメータ 摘要
dcat_con_id 一意のデータ・カタログ接続識別子。デフォルト値はNULLです。

データ・カタログ・ビューの要約

Autonomous Databaseとのデータ・カタログ統合には、多数の表およびビューが用意されています。

次の表およびビューは、次のことを理解するのに役立ちます。

  • 使用可能なデータ・カタログ・アセット。データベース、オブジェクト・ストアなど、あらゆるタイプのデータ・カタログ・アセットに関する情報を取得します。
  • Autonomous Databaseと同期されたデータ・カタログ・オブジェクト・ストレージのアセットおよびエンティティに関する情報。これには、データ・カタログ・アイテム(アセット、フォルダおよびエンティティ)がAutonomous Databaseオブジェクト(スキーマおよび外部表)にどのようにマップされるかの詳細が含まれます。
  • メタデータ同期実行。同期中に発生した問題など、同期ジョブの詳細を確認します。

この表は、DBMS_DCATパッケージで提供される表およびビューを示しています。

表示 摘要
ALL_CLOUD_CATALOG_DATABASESビュー OCIデータ・カタログ・データ・アセットおよびAWS Glueデータ・カタログ・データベースに関する情報を表示します
ALL_CLOUD_CATALOG_TABLESビュー OCIデータ・カタログのデータ・エンティティおよびAWS Glueデータ・カタログの表に関する情報を表示するために使用されます
ALL_DCAT_ASSETSビュー このデータベースにアクセスする権限があるデータ・カタログ・アセットをリストします
ALL_DCAT_ATTRIBUTESビュー このデータベースにアクセスする権限があるデータ・カタログ属性をリストします
ALL_DCAT_CONNECTIONSビュー このインスタンスに接続されたデータ・カタログに関する情報を含むビュー
ALL_DCAT_ENTITIESビュー

このデータベースにアクセスする権限がある論理エンティティをリストします

ALL_DCAT_FOLDERSビュー 論理エンティティのデータファイルを含むオブジェクト・ストレージ・バケットのメタデータをリストします
ALL_DCAT_GLOBAL_ACCESSIBLE_CATALOGSビュー すべてのリージョンでアクセス可能なすべてのカタログと、各カタログのアクセス権限のレベルをリストします
ALL_DCAT_LOCAL_ACCESSIBLE_CATALOGSビュー 現在のリージョンでアクセス可能なすべてのカタログと、各カタログのアクセス権限のレベルをリストします
ALL_GLUE_DATABASESビュー データ・カタログ資格証明がアクセスを許可されているAWS Glueデータ・カタログ・データベースをリストします
ALL_GLUE_TABLESビュー データ・カタログ資格証明がアクセスを許可されているすべてのAWS Glueデータ・カタログ表を表示します
DCAT_ATTRIBUTESビュー 外部表の列への論理エンティティ属性のマッピングのリスト
DCAT_ENTITIESビュー 外部表への論理エンティティのマッピングについて説明します。
DBMS_DCAT$SYNC_LOGビュー 現在のユーザーが実行した最後の同期操作のログ表に簡単にアクセスできます。

ALL_CLOUD_CATALOG_DATABASESビュー

ビューALL_CLOUD_CATALOG_DATABASESを使用して、OCIデータ・カタログ・データ・アセットおよびAWS Glueデータ・カタログ・データベースに関する情報を表示します。

摘要
DCAT_CON_ID CON1
CATALOG_ID データ・カタログの一意識別子。

OCIデータ・カタログの例:

ocid1.datacatalog.oc1.ap-mumbai-1.….y35a

AWS Glueデータ・カタログの例:

NULL

579294766787

NAME データ・アセット(OCI)/データベースの名前(AWS Glue)。

OCIデータ・カタログの例:

OBJECT_STORE_AT_ASHBURN

AWS Glueデータ・カタログの例:

OBJECT_STORE_AT_N_CALIFORNIA

DESCRIPTION データ・アセット(OCI)/データベース(AWS Glue)の説明。

OCIデータ・カタログの例:

Data stored in S3 (N. California)

AWS Glueデータ・カタログの例:

Data stored in S3 (N. California)
TIME_CREATED データ・アセット(OCI)/データベース(AWS Glue)がデータ・カタログに作成された日時。

OCIデータ・カタログの例:

26-SEP-22 10.56.01.395000 PM +00:00

AWS Glueデータ・カタログの例:

2022-06-15T09:45:35+01:00

DETAILS 各データ・エンティティ(OCI)/データベース(AWS Glue)に関するメタデータを含むJSONドキュメント。

OCIデータ・カタログの例:

{
  "catalog-id": "ocid1.datacatalog.oc1.ap-mumbai-1.amaaa...",
  "description": null,
  "display-name": "OBJECT_STORE_AT_ASHBURN",
  "external-key": "https://swiftobjectstorage.us-ashburn-1....",
  "key": "bc95181c-3ac3-4959-9e5f-4e460d3fb82a",
  "lifecycle-state": "ACTIVE",
  "time-created": "2022-09-26T22:56:01.395000+00:00",
  "type-key": "3ea65bc5-f60d-477a-a591-f063665339f9",
  "uri": "/dcat/20190325/dataAssets/bc95181c-3ac3-4959-9e5f-4e460d3fb82a"
}

AWS Glueデータ・カタログの例:

{
    "Name": "dbmsdcatpoc",
    "Parameters": {
        "somekey": "somevalue"
    },
    "CreateTime": "2022-06-15T09:45:35+01:00",
    "CreateTableDefaultPermissions": [
        {
            "Principal": {
                "DataLakePrincipalIdentifier": "IAM_ALLOWED_PRINCIPALS"
            },
            "Permissions": [
                "ALL"
            ]
        }
    ],
    "CatalogId": "579294766787"
}

ALL_CLOUD_CATALOG_TABLESビュー

ビューALL_CLOUD_CATALOG_TABLESは、OCIデータ・カタログのデータ・エンティティおよびAWS Glueデータ・カタログの表に関する情報を表示するために使用します。

摘要
DCAT_CON_ID データ・カタログの一意の識別子。接続ID。

OCIデータ・カタログの例: CON1

AWS Glueデータ・カタログの例: CON1

CATALOG_ID データ・カタログの一意識別子。

OCIデータ・カタログの例: ocid1.datacatalog.oc1.ap-mumbai-1.….y35a

AWS Glueデータ・カタログの例: NULL

579294766787

DATABASE_NAME データ・アセット(OCI)/データベースの名前(AWS Glue)。

OCIデータ・カタログの例: OBJECT_STORE_AT_ASHBURN

AWS Glueデータ・カタログの例: OBJECT_STORE_AT_N_CALIFORNIA

NAME データ・エンティティ(OCI)/表(AWS Glue)の名前。

OCIデータ・カタログの例: BIKES_TRIPS

AWS Glueデータ・カタログの例: BIKES_TRIPS

DESCRIPTION データ・エンティティ(OCI)/表(AWS Glue)の説明。

OCIデータ・カタログの例: Table storing bike trips

AWS Glue Data Catalogの例: Table storing bike trips

TIME_CREATED データ・エンティティ(OCI)/表(AWS Glue)がデータ・カタログに作成された日時。

OCIデータ・カタログの例: 26-SEP-22 10.56.01.395000 PM +00:00

AWS Glue Data Catalogの例: 2022-06-15T09:45:35+01:00

TIME_UPDATED データ・エンティティ(OCI)/表(AWS Glue)に最後に変更が加えられた時刻。

OCIデータ・カタログの例: 26-SEP-22 10.56.01.395000 PM +00:00

AWS Glue Data Catalogの例: 2022-06-15T09:45:35+01:00

DETAILS 各データ・エンティティ(OCI)/表(AWS Glue)に関するメタデータを含むJSONドキュメント

OCIデータ・カタログの例:

{  
  "business-name": null,
  "data-asset-key": "bc95181c-3ac3-4959-9e5f-...",
  "description": null,
  "display-name": "bikes_trips",
  "external-key": "LE: https://swiftobjectstorage.us-ashburn-1.oraclecloud.com/v1/..._trips",
  "folder-key": "9c4b542d-d6eb-4b83-bf59-...",
  "folder-name": "hive",
  "is-logical": true,
  "is-partition": false,
  "key": "fde30a69-a07c-478a-ab62-...",
  "lifecycle-state": "ACTIVE",
  "object-storage-url": "https://objectstorage.us-ashburn-1.oraclecloud.com/n/...",
  "path": "OBJECT_STORE_AT_ASHBURN/hive/hive",
  "pattern-key": "db21b3f1-1508-4045-aa80-...",
  "properties": {
    "default": {
      "CONTENT-LENGTH": "4310321",
      "LAST-MODIFIED": "Fri, 9 Oct 2020 20:16:52 UTC",
      "archivedPECount": "0",
      "dataEntityExpression": "{logicalEntity:[^/]+}.db/{logicalEntity:[^/]+}/.*",
      "harvestedFile": "bikes.db/trips/p_start_month=2019-09/000000_0",
      "patternName": "bikes_trips"
    },
    "harvestProps": {
      "characterset": "UTF8",
      "compression": "none",
      "type": "PARQUET"
    }
  },
  "realized-expression": "bikes.db/trips/.*",
  "time-created": "2022-09-26T22:56:35.063000+00:00",
  "time-updated": "2022-09-26T22:56:35.063000+00:00",
  "type-key": "6753c3af-7f88-44b9-be52-1d57bef462fb",
  "updated-by-id": "ocid1.user.oc1..r5l3tov7a",
  "uri": "/dcat/20190325/dataAssets/bc95181c-3ac3-4959-9e5f-..."
}

AWS Glueデータ・カタログの例:

{
    "Name": "bikes_trips",
    "DatabaseName": "dbmsdcatpoc",
    "Owner": "owner",
    "CreateTime": "2022-06-23T13:24:20+01:00",
    "UpdateTime": "2022-06-23T13:24:20+01:00",
    "LastAccessTime": "2022-06-23T13:24:20+01:00",
    "Retention": 0,
    "StorageDescriptor": {
        "Columns": [
            {
                "Name": "trip_duration",
                "Type": "int"
            },
            {
                "Name": "start_month",
                "Type": "string"
            }, ...
        ],
        "Location": "s3://dbmsdcatpoc/hive/bikes.db/trips/",
        "InputFormat": "org.apache.hadoop.hive.ql.io.parquet.MapredParquetInputFormat",
        "OutputFormat": "org.apache.hadoop.hive.ql.io.parquet.MapredParquetOutputFormat",
        "Compressed": false,
        "NumberOfBuckets": -1,
        "SerdeInfo":
 {            "SerializationLibrary": "org.apache.hadoop.hive.ql.io.parquet.serde.ParquetHiveSerDe",
            "Parameters": {
                "serialization.format": "1"
            }
        },
        "BucketColumns": [],
        "SortColumns": [],
        "Parameters": {
            "CrawlerSchemaDeserializerVersion": "1.0",
            "CrawlerSchemaSerializerVersion": "1.0",
            "UPDATED_BY_CRAWLER": "crawler-bikes",
            "averageRecordSize": "86",
            "classification": "parquet",
            "compressionType": "none",
            "objectCount": "12",
            "recordCount": "404947",
            "sizeKey": "35312159",
            "typeOfData": "file"
        },
        "StoredAsSubDirectories": false
    },
    "PartitionKeys": [
        {
            "Name": "p_start_month",
            "Type": "string"
        }
    ],
    "TableType": "EXTERNAL_TABLE",
    "Parameters": {
        "CrawlerSchemaDeserializerVersion": "1.0",
        "CrawlerSchemaSerializerVersion": "1.0",
        "UPDATED_BY_CRAWLER": "crawler-bikes",
        "averageRecordSize": "86",
        "classification": "parquet",
        "compressionType": "none",
        "objectCount": "12",
        "recordCount": "404947",
        "sizeKey": "35312159",
        "typeOfData": "file"
    },
    "CreatedBy": "arn:aws:sts::579294766787:assumed-role/AWSGlueServiceRole-dbmsdcat/AWS-Crawler",
    "IsRegisteredWithLakeFormation": false,
    "CatalogId": "579294766787",
    "VersionId": "0"
}

ALL_DCAT_ASSETSビュー

このデータベースにアクセスする権限があるデータ・カタログ・アセット。

データ型 摘要
DCAT_CON_ID VARCHAR2 (4000) インスタンス内で一意の接続識別子

KEY

VARCHAR2(4000)

資産キー

DISPLAY_NAME VARCHAR2(4000) アセット表示名
DESCRIPTION VARCHAR2(4000) アセットの説明
CATALOG_ID VARCHAR2(4000) アセットを含むデータ・カタログのOCID
EXTERNAL_KEY VARCHAR2(4000) アセットのベース・オブジェクト・ストレージURI
URI VARCHAR2(4000) データ・カタログAPIのアセットURI
TIME_CREATED TIMESTAMP(6) WITH TIMEZONE データ・アセットが作成された日時
TYPE_KEY VARCHAR2(4000) データ・アセット・タイプのキー(現在は、Object Storageデータ・アセットのみがサポートされています)。タイプ・キーは、'/types'データ・カタログ・エンドポイントを介して検索できます。
LIFECYCLE_STATE VARCHAR2(4000) データ・アセットの現在の状態。考えられるライフ・サイクルの状態の詳細は、lifecycleStateで可能な状態のリストについて、データ・カタログのDataAssetリファレンスを参照してください。

ALL_DCAT_ATTRIBUTESビュー

このデータベースにアクセスする権限があるデータ・カタログ属性。

データ型 摘要
DCAT_CON_ID VARCHAR2 (4000) インスタンス内で一意の接続識別子
KEY NUMBER 属性キー

DISPLAY_NAME

VARCHAR2(4000)

属性の表示名

BUSINESS_NAME VARCHAR2(4000) 属性ビジネス名
DESCRIPTION VARCHAR2(4000) 属性摘要
DATA_ASSET_KEY VARCHAR2(4000) データ・アセット・キー
FOLDER_KEY VARCHAR2(4000) フォルダ・キー
ENTITY_KEY VARCHAR2(4000) エンティティ・キー
EXTERNAL_KEY VARCHAR2(4000) 属性の一意の外部キー
LENGTH NUMBER 属性値の最大許容長
PRECISION NUMBER 属性値の精度(通常はfloatデータ型に適用されます)
SCALE NUMBER 属性値のスケール(通常はfloatデータ型に適用されます)
IS_NULLABLE NUMBER この属性にNULL値を割り当てることができるかどうかを識別します
URI VARCHAR2(4000) データ・カタログAPIの属性インスタンスへのURI
LIFECYCLE_STATE VARCHAR2(4000) 属性の現在の状態。考えられるライフ・サイクル状態の詳細は、lifecycleStateで使用可能な状態のリストについて、データ・カタログの属性リファレンスを参照してください。
TIME_CREATED TIMESTAMP(6) WITH TIME ZONE 属性が作成された日時
EXTERNAL_DATA_TYPE VARCHAR2(4000) 外部システムに定義されている属性のデータ型
MIN_COLLECTION_COUNT NUMBER 属性のタイプがコレクション型の場合の要素の最小数
MAX_COLLECTION_COUNT NUMBER 属性のタイプがコレクション型の場合の要素の最大数
DATATYPE_ENTITY_KEY VARCHAR2(4000) この属性のデータ型を表すエンティティ・キー(この属性が複合型の場合に適用可能)
EXTERNAL_DATATYPE_ENTITY_KEY VARCHAR2(4000) この属性のデータ型を表す外部エンティティ・キー(この属性が複合型の場合に適用可能)
PARENT_ATTRIBUTE_KEY VARCHAR2(4000) この属性の親属性を表す属性キー(親属性が複合データ型の場合に適用可能)
EXTERNAL_PARENT_ATTRIBUTE_KEY VARCHAR2(4000) この属性の親属性を表す外部属性キー(親属性が複合タイプの場合に適用可能)
PATH VARCHAR2(4000) 属性のフルパス

ALL_DCAT_CONNECTIONSビュー

このインスタンスに接続されているデータ・カタログに関する情報を含むビュー。

データ型 摘要
DCAT_CON_ID VARCHAR2(4000) インスタンス内で一意の接続識別子
COMPARTMENT_ID VARCHAR2(4000) データ・カタログ・インスタンスが存在するコンパートメントのOCID
INSTANCE_ID VARCHAR2(4000)

データ・カタログのインスタンスのOCID

REGION

VARCHAR2(4000)

データ・カタログのインスタンスのリージョン

ENDPOINT VARCHAR2(4000) データ・カタログのインスタンスのエンドポイント
CREATED TIMESTAMP データ・カタログ・インスタンスが作成されたとき
NAME VARCHAR2(4000) データ・カタログ・インスタンスの名前
LAST_UPDATED TIMESTAMP データ・カタログ・インスタンスへの接続の最終更新のタイムスタンプ
LATEST_OPERATION_ID NUMBER 最後の同期操作のID
DATA_CATALOG_CREDENTIAL VARCHAR2(128) データ・カタログへのアクセスに使用される資格証明
OBJECT_STORE_CREDENTIAL VARCHAR2(128) オブジェクト・ストアにアクセスするために外部表ドライバによって使用される資格証明

ALL_DCAT_ENTITIESビュー

このデータベースにアクセスする権限があるデータ・カタログ論理エンティティ。

データ型 摘要
DCAT_CON_ID VARCHAR2(4000) インスタンス内で一意の接続識別子
CATALOG_ID VARCHAR2(4000) アセットを含むデータ・カタログのOCID

KEY

VARCHAR2(4000)

エンティティ・キー

DISPLAY_NAME VARCHAR2(4000)

エンティティ表示名

BUSINESS_NAME VARCHAR2(4000)

エンティティ・ビジネス名

DESCRIPTION VARCHAR2(4000)

論理エンティティの説明

DATA_ASSET_KEY

VARCHAR2(4000)

資産キー

FOLDER_KEY

VARCHAR2(4000)

フォルダ一意キー

FOLDER_NAME VARCHAR2(4000) フォルダ名(バケット)
EXTERNAL_KEY VARCHAR2(4000) 論理エンティティの外部キー
PATTERN_KEY VARCHAR2(4000) 論理エンティティの関連パターンのキー
REALIZED_EXPRESSION VARCHAR2(4000) この論理エンティティのファイルの取得に使用される正規表現
PATH VARCHAR2(4000) 論理エンティティのフルパス
TIME_CREATED TIMESTAMP(6) WITH TIME ZONE エンティティが作成された日時
TIME_UPDATED TIMESTAMP(6) WITH TIME ZONE データ・エンティティに最後に変更が行われた時刻
UPDATED_BY_ID VARCHAR2(4000) データ・ カタログでこのオブジェクトを更新したユーザーのOCID
URI VARCHAR2(4000) APIのエンティティ・インスタンスのURI
LIFECYCLE_STATE VARCHAR2(4000) エンティティの現在の状態。考えられるライフ・サイクルの状態の詳細は、lifecycleStateで可能な状態のリストについて、データ・カタログのエンティティ・リファレンスを参照してください。

ALL_DCAT_FOLDERSビュー

論理エンティティのデータファイルを含むオブジェクト・ストレージ・バケットのメタデータ。

データ型 摘要
DCAT_CON_ID VARCHAR2(4000) インスタンス内で一意の接続識別子
CATALOG_ID VARCHAR2(4000) アセットを含むデータ・カタログのOCID

KEY

VARCHAR2(4000)

フォルダ・キー

DISPLAY_NAME

VARCHAR2(4000)

フォルダ表示名

BUSINESS_NAME VARCHAR2(4000) フォルダ・ビジネス名
DESCRIPTION VARCHAR2(4000) フォルダの説明
DATA_ASSET_KEY VARCHAR2(4000) フォルダを含むデータ・アセットのキー
PARENT_FOLDER_KEY VARCHAR2(4000) 親フォルダのキー(現在はデータ・アセット・キー)
PATH VARCHAR2(4000) フォルダのフルパス
EXTERNAL_KEY VARCHAR2(4000) バケットのオブジェクト・ストレージURI
TIME_EXTERNAL TIMESTAMP(6) WITH TIMEZONE このフォルダの最終変更タイムスタンプ
TIME_CREATED TIMESTAMP(6) WITH TIMEZONE フォルダが作成された日時
URI VARCHAR2(4000) データ・カタログAPIのフォルダ・インスタンスへのURI。
LIFECYCLE_STATE VARCHAR2(4000) フォルダの現在の状態。考えられるライフ・サイクルの状態の詳細は、lifecycleStateで可能な状態のリストについて、データ・カタログのフォルダ・リファレンスを参照してください。

ALL_DCAT_GLOBAL_ACCESSIBLE_CATALOGSビュー

このビューには、すべてのリージョンでアクセス可能なすべてのカタログが、各カタログのアクセス権限のレベルとともにリストされます。

データ型 摘要

CATALOG_ID

VARCHAR2(4000)

カタログOCID

CATALOG_NAME VARCHAR2(4000) カタログの名前
CATALOG_REGION VARCHAR2(4000) カタログ・リージョンの名前
CATALOG_SCORE NUMBER カタログ・スコアは、データ・カタログ・アクセス資格証明に対して構成された権限から計算される数値です。カタログ・スコアが高いほど、権限が大きくなるため、このカタログがこのAutonomous Databaseインスタンスで使用することが想定される可能性が高くなります。

ALL_DCAT_LOCAL_ACCESSIBLE_CATALOGSビュー

このビューには、現在のリージョンでアクセス可能なすべてのカタログが、各カタログのアクセス権限レベルとともにリストされます。

データ型 摘要

CATALOG_ID

VARCHAR2(4000)

カタログOCID

CATALOG_NAME VARCHAR2(4000) カタログの名前
CATALOG_SCORE NUMBER カタログ・スコアは、データ・カタログ・アクセス資格証明に対して構成された権限から計算される数値です。カタログ・スコアが高いほど、権限が大きくなるため、このカタログがこのAutonomous Databaseインスタンスで使用することが想定される可能性が高くなります。

ALL_GLUE_DATABASESビュー

データカタログの資格情報にアクセスする権限があるAWS Glueデータカタログデータベース。

データ型 摘要
DCAT_CON_ID VARCHAR2(4000) データ・カタログ接続IDの一意識別子。
CATALOG_ID VARCHAR2(255) データ・カタログの一意識別子。
NAME VARCHAR2(255) データベースの名前。
DESCRIPTION VARCHAR2(2048) データベースの説明。
LOCATION_URI VARCHAR2(1024) データベースの場所。
CREATE_TIME TIMESTAMP データ・カタログにデータベースが作成された時刻。
PARAMETERS CLOB データベースのパラメータおよびプロパティを定義するキーと値のペアを含むJSONドキュメント。
TARGET_DATABASE VARCHAR2(4000) AWSでのリソース・リンクのターゲット・データベースについて説明するJSONドキュメント。

ALL_GLUE_TABLESビュー

このビューには、データ・カタログ資格証明がアクセスを許可されているすべてのAWS Glueデータ・カタログ表が表示されます。

データ型 摘要
DCAT_CON_ID VARCHAR2(4000) データ・カタログ接続IDの一意識別子。
CATALOG_ID VARCHAR2(255) カタログ識別子
DATABASE_NAME VARCHAR2(255) データベース名
NAME VARCHAR2(255) 表名
TABLE_TYPE VARCHAR2(255) 表タイプ
CLASSIFICATION VARCHAR2(255)  
DESCRIPTION VARCHAR2(2048) 表の説明
OWNER VARCHAR2(255) 表所有者
CREATED_BY VARCHAR2(255) テーブル作成者
CREATE_TIME TIMESTAMP データ・カタログに表が作成された時刻。
LAST_ANALYZED_TIME TIMESTAMP この表の列統計が最後に計算された時刻。
LAST_ACCESS_TIME TIMESTAMP 最後にテーブルにアクセスした時刻。
UPDATE_TIME TIMESTAMP 最後にテーブルが更新された時刻。
IS_REGISTERED_WITH_LAKE_FORMATION NUMBER 表がAWSレイク形成に登録されているかどうかを示します。
PARAMETERS CLOB 表のプロパティを定義するキーと値のペアを含むJSONドキュメント。
PARTITION_KEYS CLOB 表のパーティション化に使用する列のリストを含むJSONドキュメント。
RETENTION NUMBER この表の保存期間。
STORAGE_DESCRIPTION CLOB 表の物理記憶域に関する情報を含むJSONドキュメント。
TARGET_TABLE VARCHAR2(4000) AWSでのリソース・リンクに使用されるターゲット表を記述するJSONドキュメント。
VERSION_ID VARCHAR2(255) 表のバージョン識別子。
VIEW_EXPANDED_TEXT CLOB Hiveとの互換性のためにAWS Glueによって導入されました。AWS Glueでは使用されません。
VIEW_ORIGINAL_TEXT CLOB Hiveとの互換性のためにAWS Glueによって導入されました。AWS Glueでは使用されません。

DCAT_ATTRIBUTESビュー

論理エンティティ属性の外部表列へのマッピングをリストします。

データ型 摘要
DCAT_CON_ID VARCHAR2 (4000) インスタンス内で一意の接続識別子
ASSET_KEY VARCHAR2(4000) データ・カタログ・アセット・キー

ENTITY_KEY

VARCHAR2(4000)

データ・カタログ・エンティティ・キー

ATTRIBUTE_KEY

VARCHAR2(4000)

データ・カタログ属性キー

ORACLE_COLUMN_NAME VARCHAR2(128) マップされた列名

DCAT_ENTITIESビュー

外部表への論理エンティティのマッピングについて説明します。

データ型 摘要
DCAT_CON_ID VARCHAR2(4000) インスタンス内で一意の接続識別子
ASSET_KEY VARCHAR2(4000) データ・カタログ・アセット・キー

ENTITY_KEY

VARCHAR2(4000)

データ・カタログ・エンティティ・キー

FOLDER_KEY

VARCHAR2(4000)

データ・カタログ・フォルダ・キー

ORACLE_TABLE_NAME VARCHAR2(128) マップされた表名
ORACLE_SCHEMA_NAME VARCHAR2(128) マップされたスキーマ名
ENTITY_ORACLE_DB_SCHEMA VARCHAR2(4000) スキーマの導出に使用されるエンティティのoracle-db-schemaカスタム・プロパティ
ASSET_ORACLE_DB_SCHEMA VARCHAR2(4000) スキーマを導出するために使用されるデータ・アセットのoracle-db-schemaカスタム・プロパティ
FOLDER_ORACLE_DB_SCHEMA VARCHAR2(4000) スキーマの導出に使用されるフォルダのoracle-db-schemaカスタム・プロパティ

DBMS_DCAT$SYNC_LOGビュー

DBMS_DCAT$SYNC_LOGビューでは、現行のユーザーが実行した最後の同期操作のログ表に簡単にアクセスできます。

RUN_SYNCプロシージャへのすべてのコールは、USER_LOAD_OPERATIONSLOGFILE_TABLEフィールドが指す新しいログ表に記録されます。ログ表は2日後に自動的に削除され、ユーザーはDELETE_ALL_OPERATIONSプロシージャ(タイプがDCAT_SYNC)を使用してすべての同期ログをクリアできます。

DBMS_DCAT$SYNC_LOGビューは、最新のログ表を自動的に識別します。DBMS_DCAT$SYNC_LOGビューのスキーマを次に示します。アクセス権限は個々のログ表のスキーマと同じです。デフォルトでは、READdbms_dcatロールおよびADMINユーザーに付与されます。

ログ表の形式は次のとおりです。

データ型 摘要

LOG_TIMESTAMP

TIMESTAMP

ログ・エントリのタイムスタンプ。

LOG_LEVEL

VARCHAR2(32)

エントリ・ログ・レベルには、OFFFATALERRORWARNINFODEBUGTRACEALLのいずれかの値を指定できます。

LOG_DETAILS VARCHAR2(32767) ログ・メッセージ。