メタデータ資産の詳細をインポートするためのCSVファイル形式

アセットのメタデータの詳細をインポートするためのCSVファイルは、特定のフォーマットルールに準拠している必要があります。

制限

  • ファイルのエンコーディングは UTF-8 です。

  • ファイルの最大推奨サイズは10,000行です。

  • 列の定義はデータ資産に対してのみ指定できます。

  • カスタム属性を持つデータ アセットは、その属性がグループに属している場合にのみインポートおよびエクスポートできます。 このようなデータ資産をインポートまたはエクスポートする場合、カスタム属性フィールドは含まれません。

  • アセット定義に続いてカラム定義も行う必要があります。

  • 予期しない余分なプロパティがエクスポートされた CSV ファイルに含まれています。 これらのプロパティーは編集しないでください。

     Asset Property: data_asset>>dataset
     Asset Property: data_asset>>mime_type
     Asset Property: data_asset>>properties>>name
     Asset Property: data_asset>>properties>>name
     Asset Property: data_asset>>semantic_description>>confidence
     Asset Property: data_asset>>semantic_description>>generated_date
     Asset Property: data_asset>>semantic_description>>generated_description
     Asset Property: data_asset>>semantic_description>>status
     Asset Property: discovered_asset>>connection_id
     Asset Property: discovered_asset>>connection_path
     Asset Property: discovered_asset>>discovery_id
     Asset Property: discovered_asset>>extended_metadata>>name
     Asset Property: discovered_asset>>extended_metadata>>name
     Asset Property: discovered_asset>>extended_metadata>>name
     Asset Property: discovered_asset>>first_imported_timestamp
     Asset Property: discovered_asset>>last_discovered_timestamp
     Asset Property: discovered_asset>>last_imported_timestamp
     Asset Property: discovered_asset>>last_job_action
     Asset Property: discovered_asset>>last_job_run_id
     Asset Property: discovered_asset>>metadata_import_id
     Asset Property: discovered_asset>>outdated_reason
     Asset Property: discovered_asset>>outdated_timestamp
     Asset Property: key_analyses>>fk_assigned
     Asset Property: key_analyses>>fk_assigned_as_pk
     Asset Property: key_analyses>>fk_defined
     Asset Property: key_analyses>>fk_defined_as_pk
     Asset Property: key_analyses>>fk_suggested
     Asset Property: key_analyses>>fk_suggested_as_pk
     Asset Property: key_analyses>>key_analysis_area_id
     Asset Property: key_analyses>>overlap_assigned
     Asset Property: key_analyses>>overlap_suggested
     Asset Property: key_analyses>>pk_assigned
     Asset Property: key_analyses>>pk_defined
     Asset Property: key_analyses>>pk_suggested
     Asset Property: metadata_enrichment_info>>MDE_instrumented
     Asset Property: term_assignment_profile>>attachment_id
     Asset Property: term_assignment_profile>>completed_date
     Asset Property: term_assignment_profile>>messages
     Asset Property: term_assignment_profile>>messages
     Asset Property: term_assignment_profile>>messages
     Asset Property: term_assignment_profile>>semexp_completed_date
     Asset Property: term_assignment_profile>>semexp_messages
     Asset Property: term_assignment_profile>>semexp_start_date
     Asset Property: term_assignment_profile>>semexp_status
     Asset Property: term_assignment_profile>>start_date
     Asset Property: term_assignment_profile>>status
    

見出し行

CSVファイルの最初の行のヘッダーは、アセットに対してどのプロパティがインポートされるかを表しています。

  • ヘッダー行はファイルの最初の行でなければならず、繰り返されてはならない。
  • ヘッダは必須ヘッダを含まなければならない。

必須ヘッダー

CSVファイルのヘッダー行には、以下の必須ヘッダーを含めなければならない:

Name
例: my_asset
Type
すべてのアセットタイプに対応しています。 列の定義はdata_assetタイプにのみ対応しています。
例: data_asset

オプション・ヘッダー

より詳細なアセットのメタデータを指定するには、CSVファイルに適切なオプションのヘッダーを追加します。

Asset Resource Key
カタログ内で資産を一意に識別する。 すべてのエクスポートCSVファイルに自動的に含まれます。
の例:Test asset.
Schema
資産 資産タイプでのみ使用可能。 資産既存の接続に関連付けるには、スキーマと物理テーブルの詳細を提供する必要があります。
Physical Table
資産 資産タイプでのみ使用可能。 資産既存の接続に関連付けるには、スキーマと物理テーブルの詳細を提供する必要があります。
Table type
資産 資産タイプでのみ使用可能。 データ資産がテーブル、ビュー、エイリアス、 クエリーのいずれかを表すかどうかを判定します。 テーブル型フィールドの値は、どのような値でも受け入れられます。
Connection Name
資産 資産タイプでのみ使用可能。
Connection Resource Key
資産 資産タイプでのみ使用可能。

Owner

:資産所有者のEメール オーナーはカタログの協力者でなければならない。 複数の値を指定することができる。
例: az@company.com

Description
資産または列の説明。
の例:This is a test asset.
Tag
資産や列を識別するためのタグ。 複数の値を指定することができる。
例: tag1
Term
割り当てられたビジネス用語。 ビジネス・タームが存在しなければならない。 パス形式を使用する。 複数の値を指定することができる。
例: AlexTestCategory>>sub category>>category one>>new term
Classification
担当クラス。 パス形式を使用する。 複数の値を指定することができる。
の例:AlexTestCategory>>sub category>>category>>new classification.
Data Class
データ資産のカラムに割り当てられるデータクラス。 パス形式を使用する。 ルートカテゴリー[uncategorized]は常に存在しなければなりません。 空白のエントリーは置き換えられない。
例: [uncategorized]>>Computer Host Name
Column Source Type
カラムのデータ型。
の例:varchar.
Column Size
カラムのデータサイズ。
例: 1024
Column Type Nullable
カラムの型がnullの可能性がある場合は、booleanを使用する。
例: TRUE
Column Native Type
列のネイティブデータ型。
の例、enum
アセット・カスタム・プロパティ マルチ・カラムはヘッダーに属性パスを持たなければならない。 プロパティは列で定義され、プロパティの値は行で定義される。 カラム名の場合は、"Asset property:"が接頭辞として使われます。 enum型のパスはnameで終わっていなければなりません。 複数の値を指定することができる。
の例:
列名:Asset Property: azub_group_test>>prop_ahhatx
列の値:value of prop1
Column Property
カラムのカスタムプロパティ。 マルチ・カラムはヘッダーに属性パスを持たなければならない。 プロパティは列で定義され、プロパティの値は行で定義される。 カラム名の場合は、"Asset property:"が接頭辞として使われます。 enum型のパスはnameで終わっていなければなりません。 複数の値を指定することができる。
の例:
列名:Column Property: col_group_zevkys>>prop_qblrui
列の値:host1 カラム名

カテゴリーと属性のパスのフォーマット

  • カテゴリーと属性の完全なパスを指定する必要があります。 カテゴリーを指定しない場合、デフォルトのカテゴリーは[uncategorized]となります。

  • カテゴリーパスと属性パスを区切るには、カテゴリーまたは属性階層の各レベル間、およびカテゴリーパスまたは属性パスとアーティファクト名の間に、>>より大きい記号を2つ使用します。

  • 最上位のカテゴリー名から最後のカテゴリー名または属性名までのカテゴリー階層または属性階層を列挙し、それぞれを>>記号で区切ります。

    例えば、第3レベルのカテゴリーや属性を作成する場合、カテゴリーフィールドは次のようになります:

    myCategory1>>myCategory2>>myCategory3
    

    ルート・カテゴリー[uncategorized]は常に存在しなければならない。 空白のエントリーは置き換えられない。 [未分類]カテゴリをセカンダリ・カテゴリとして指定することはできませんし、サブカテゴリを持つこともできません。

メタデータ・アセットCSVファイルの例

;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;
Asset Resource Key;Name;Type;Schema;Physical Table;Table Type;Connection Name;Connection Resource Key;Owner;Owner;Description;Tag;Tag;Asset Property: Data use >> Can be used in marketing;"Asset Property:
Data use >> Can be used in product improvement";Term;Term;Term;Classification;Classification;Classification;Classification;Data Class;Column Source Type;Column Size;Column Type Nullable;Column Native Type;Column Property: Indicators >> Is sensitive;Column Property: Indicators >> Is trusted;"Column Property: Stakeholders >> QA
";Column Property: Stakeholders >> Subject Matter Experts;Column Property: Stakeholders >> Subject Matter Experts;Column Property: ungrouped property X
0000:0000:0000:0000:0000:FFFF:3216:9DA3|50001|BLUDB:/BANKING/MORTGAGE_APPLICANTS;MORTGAGE_APPLICANTS;data_asset;BANKING;MORTGAGE_APPLICANTS;TABLE;Data Fabric Trial Db2 Warehouse;0000:0000:0000:0000:0000:FFFF:3216:9DA3|50001|BLUDB;Mary Jones;Marketing User Group;Residential mortgage applicants;BANKING;Demo;YES;NO;Banking >> Mortgage Application;Banking >> Mortgage Applicant;Banking >> Bank Customer;[uncategorized] >> Personally Identifiable Information;>> Personal Information ;Sensitive Personal Information;High Importance;;;;;;;;;;;
0000:0000:0000:0000:0000:FFFF:3216:9DA3|50001|BLUDB:/BANKING/MORTGAGE_APPLICANTS;ID;column;;;;;;;;customer id;;;;;Banking >> ID;;;;;;;>> Identifier;varchar;1024;TRUE;varchar;;;;;;
0000:0000:0000:0000:0000:FFFF:3216:9DA3|50001|BLUDB:/BANKING/MORTGAGE_APPLICANTS;NAME;column;;;;;;;;Name of applicant;;;;;Mortgage Default Analysis >> Name;Banking >> Name;Information Governance >> Information Governance Classifications >> Business Classification;>> Personally Identifiable Information;;;;>> Person Name;varchar;1024;TRUE;varchar;Yes;Yes;Michal Sze;John Smith;Mary Jones;
0000:0000:0000:0000:0000:FFFF:3216:9DA3|50001|BLUDB:/BANKING/MORTGAGE_APPLICANTS;STREET_ADDRESS;column;;;;;;;;street address;;;;;;;;;;;;>> US Street Name;varchar;1024;TRUE;varchar;Yes;Yes;;;;
0000:0000:0000:0000:0000:FFFF:3216:9DA3|50001|BLUDB:/BANKING/MORTGAGE_APPLICANTS;CITY;column;;;;;;;;city;;;;;;;;;;;;>> City;varchar;1024;TRUE;varchar;Yes;Yes;;;;blah
0000:0000:0000:0000:0000:FFFF:3216:9DA3|50001|BLUDB:/BANKING/MORTGAGE_APPLICANTS;STATE;column;;;;;;;;state;;;;;;;;;;;;>> US State Name;varchar;1024;TRUE;varchar;Yes;Yes;;;;
0000:0000:0000:0000:0000:FFFF:3216:9DA3|50001|BLUDB:/BANKING/MORTGAGE_APPLICANTS;STATE_CODE;column;;;;;;;;state code;;;;;;;;;;;;>> US State Code;varchar;1024;TRUE;varchar;Yes;Yes;;;;
0000:0000:0000:0000:0000:FFFF:3216:9DA3|50001|BLUDB:/BANKING/MORTGAGE_APPLICANTS;ZIP_CODE;column;;;;;;;;postal or zip code;;;;;;;;;;;;;varchar;1024;TRUE;varchar;Yes;Yes;;;;
0000:0000:0000:0000:0000:FFFF:3216:9DA3|50001|BLUDB:/BANKING/MORTGAGE_APPLICANTS;EMAIL_ADDRESS;column;;;;;;;;email address;;;;;;;;;;;;>> Email Address;varchar;1024;TRUE;varchar;Yes;Yes;;;;
0000:0000:0000:0000:0000:FFFF:3216:9DA3|50001|BLUDB:/BANKING/MORTGAGE_APPLICANTS;PHONE_NUMBER;column;;;;;;;;home phone number;;;;;;;;;;;;>> US Phone Number;varchar;1024;TRUE;varchar;Yes;Yes;;;;
0000:0000:0000:0000:0000:FFFF:3216:9DA3|50001|BLUDB:/BANKING/MORTGAGE_APPLICANTS;GENDER;column;;;;;;;;Gender identity;;;;;;;;;;;;>> Gender;varchar;1024;TRUE;"enum(M;F)";Yes;Yes;;;;
0000:0000:0000:0000:0000:FFFF:3216:9DA3|50001|IHUB:/BANKING/MORTGAGE_APPLICANTS;MORTGAGE_APPLICANTS;data_asset;BANKING;MORTGAGE_APPLICANTS;;;;Mary Jones;Marketing User Group;Residential mortgage applicants;BANKING;Demo;YES;NO;Banking >> Mortgage Application;Banking >> Mortgage Applicant;Banking >> Bank Customer;[uncategorized] >> Personally Identifiable Information;>> Personal Information ;Sensitive Personal Information;High Importance;;;;;;;;;;;
0000:0000:0000:0000:0000:FFFF:3216:9DA3|50001|IHUB:/BANKING/MORTGAGE_APPLICANTS;ID;column;;;;;;;;customer id;;;;;Banking >> ID;;;;;;;>> Identifier;varchar;1024;TRUE;varchar;;;;;;
0000:0000:0000:0000:0000:FFFF:3216:9DA3|50001|IHUB:/BANKING/MORTGAGE_APPLICANTS;NAME;column;;;;;;;;Name of applicant;;;;;Mortgage Default Analysis >> Name;Banking >> Name;Information Governance >> Information Governance Classifications >> Business Classification;>> Personally Identifiable Information;;;;>> Person Name;varchar;1024;TRUE;varchar;Yes;Yes;Michal Sze;John Smith;Mary Jones;
0000:0000:0000:0000:0000:FFFF:3216:9DA3|50001|IHUB:/BANKING/MORTGAGE_APPLICANTS;STREET_ADDRESS;column;;;;;;;;street address;;;;;;;;;;;;>> US Street Name;varchar;1024;TRUE;varchar;Yes;Yes;;;;
0000:0000:0000:0000:0000:FFFF:3216:9DA3|50001|IHUB:/BANKING/MORTGAGE_APPLICANTS;CITY;column;;;;;;;;city;;;;;;;;;;;;>> City;varchar;1024;TRUE;varchar;Yes;Yes;;;;blah
0000:0000:0000:0000:0000:FFFF:3216:9DA3|50001|IHUB:/BANKING/MORTGAGE_APPLICANTS;STATE;column;;;;;;;;state;;;;;;;;;;;;>> US State Name;varchar;1024;TRUE;varchar;Yes;Yes;;;;
0000:0000:0000:0000:0000:FFFF:3216:9DA3|50001|IHUB:/BANKING/MORTGAGE_APPLICANTS;STATE_CODE;column;;;;;;;;state code;;;;;;;;;;;;>> US State Code;varchar;1024;TRUE;varchar;Yes;Yes;;;;
0000:0000:0000:0000:0000:FFFF:3216:9DA3|50001|IHUB:/BANKING/MORTGAGE_APPLICANTS;ZIP_CODE;column;;;;;;;;postal or zip code;;;;;;;;;;;;;varchar;1024;TRUE;varchar;Yes;Yes;;;;
0000:0000:0000:0000:0000:FFFF:3216:9DA3|50001|IHUB:/BANKING/MORTGAGE_APPLICANTS;EMAIL_ADDRESS;column;;;;;;;;email address;;;;;;;;;;;;>> Email Address;varchar;1024;TRUE;varchar;Yes;Yes;;;;
0000:0000:0000:0000:0000:FFFF:3216:9DA3|50001|IHUB:/BANKING/MORTGAGE_APPLICANTS;PHONE_NUMBER;column;;;;;;;;home phone number;;;;;;;;;;;;>> US Phone Number;varchar;1024;TRUE;varchar;Yes;Yes;;;;
0000:0000:0000:0000:0000:FFFF:3216:9DA3|50001|IHUB:/BANKING/MORTGAGE_APPLICANTS;GENDER;column;;;;;;;;Gender identity;;;;;;;;;;;;>> Gender;varchar;1024;TRUE;"enum(M;F)";Yes;Yes;;;;
0000:0000:0000:0000:0000:FFFF:3216:9DA3|50001|BLUDB:/BANKING/CUSTOMER_LOYALTY;CUSTOMER_LOYALTY;data_asset;BANKING;CUSTOMER_LOYALTY;;Data Fabric Trial Db2 Warehouse;0000:0000:0000:0000:0000:FFFF:3216:9DA3|50001|BLUDB;John Smith;;Customer Loyalty table;CUSTOMER;;YES;YES;;;;;;;;;;;;;;;;;;
0000:0000:0000:0000:0000:FFFF:3216:9DA3|50001|BLUDB:/BANKING/CUSTOMER_LOYALTY;LOYALTY_NBR;column;;;;;;;;Loyalty number;;;;;;;;;;;;;integer;10;FALSE;integer;Yes;Yes;;;;
0000:0000:0000:0000:0000:FFFF:3216:9DA3|50001|BLUDB:/BANKING/CUSTOMER_LOYALTY;ORDER_YEAR;column;;;;;;;;Order year;;;;;;;;;;;;;smallint;5;TRUE;smallint;Yes;Yes;;;;
0000:0000:0000:0000:0000:FFFF:3216:9DA3|50001|BLUDB:/BANKING/CUSTOMER_LOYALTY;QUARTER;column;;;;;;;;Order quarter;;;;;;;;;;;;;varchar;2;TRUE;varchar;Yes;Yes;;;;
0000:0000:0000:0000:0000:FFFF:3216:9DA3|50001|BLUDB:/BANKING/CUSTOMER_LOYALTY;MONTHS_AS_MEMBER;column;;;;;;;;Months as member;;;;;;;;;;;;;smallint;5;TRUE;smallint;Yes;Yes;;;;
0000:0000:0000:0000:0000:FFFF:3216:9DA3|50001|BLUDB:/BANKING/CUSTOMER_LOYALTY;LOYALTY_STATUS;column;;;;;;;;Status;;;;;;;;;;;;;varchar;15;TRUE;varchar;Yes;Yes;;;;
0000:0000:0000:0000:0000:FFFF:3216:9DA3|50001|BLUDB:/BANKING/CUSTOMER_LOYALTY;PRODUCT_LINE;column;;;;;;;;Products;;;;;;;;;;;;;varchar;50;TRUE;varchar;Yes;Yes;;;;
0000:0000:0000:0000:0000:FFFF:3216:9DA3|50001|BLUDB:/BANKING/CUSTOMER_LOYALTY;COUPON_RESPONSE;column;;;;;;;;Can receive coupons;;;;;;;;;;;;;varchar;20;TRUE;varchar;Yes;Yes;;;;
0000:0000:0000:0000:0000:FFFF:3216:9DA3|50001|BLUDB:/BANKING/CUSTOMER_LOYALTY;COUNT;column;;;;;;;;Count;;;;;;;;;;;;;smallint;5;TRUE;smallint;Yes;Yes;;;;
0000:0000:0000:0000:0000:FFFF:3216:9DA3|50001|BLUDB:/BANKING/CUSTOMER_LOYALTY;QUAITITY_SOLD;column;;;;;;;;Quantity sold;;;;;;;;;;;;;smallint;5;TRUE;smallint;Yes;Yes;;;;
0000:0000:0000:0000:0000:FFFF:3216:9DA3|50001|BLUDB:/BANKING/CUSTOMER_LOYALTY;UNIT_SALES_PRICE;column;;;;;;;;Unit sales price;;;;;;;;;;;;;decimal;8;TRUE;decimal;Yes;Yes;;;;
;SEFT Mortgage System;Application;;;;;;Mortgage Owners;;Mortgage application system for retail customers.;;;;;;;;;;;;;;;;;;;;;;
;Customer onboarding;Process;;;;;;Mortgage Owners;;Process to onboard new customers;;;;;;;;;;;;;;;;;;;;;;
;Sales results in 2023;bi_report;;;;;;Ben Smith;;Sales report from cognos;growth;;;;My category 1 >> My category 2 >> term 1;My category 1 >> My category 2 >> term 2;;My category 1 >> My category 2 >> classification 1;;;;;;;;;;;;;;

もっと見る