항목 관리 및 커스텀 소스 수집

이 문서에서는 항목 유형, 항목 그룹, 커스텀 항목을 만들어 커스텀 데이터 소스를 Dataplex Universal Catalog에 통합하는 방법을 설명합니다.

항목은 메타데이터를 캡처하는 리소스를 나타냅니다. 항목 그룹은 하나 이상의 항목을 위한 컨테이너로, 액세스 제어 및 리전별 위치를 관리하는 데 사용됩니다. 항목 유형은 항목의 필수 메타데이터를 정의합니다. 항목 유형은 자유로운 흐름의 느슨하게 정의된 항목 리소스에 구조와 규칙을 적용하여 항목을 확장할 수 있도록 합니다.

커스텀 데이터 소스를 Dataplex Universal Catalog에 통합하려면 커스텀 항목 그룹에 있는 커스텀 항목 유형을 사용하여 커스텀 항목을 만듭니다. 커스텀 항목을 만들려면 다음과 같은 대략적인 단계를 따라야 합니다.

1. 항목 그룹을 만듭니다.
2. 항목 유형을 만듭니다.
3. 항목 그룹 내에 항목 유형의 커스텀 항목을 만듭니다.

항목

항목은 메타데이터를 캡처하는 데이터 애셋을 나타냅니다. 모든 항목은 항목 유형의 인스턴스입니다. 항목의 관점에 대한 각 작업은 항목 유형의 필수 관점을 준수해야 합니다. 예를 들어 항목을 만들 때는 항목 유형에서 정의한 모든 관점 유형의 값을 제공해야 합니다. 항목 유형에서 required로 표시된 항목의 관점은 삭제할 수 없습니다.

항목 카테고리

• 시스템 항목: Dataplex Universal Catalog는 BigQuery 데이터 세트 또는 테이블과 같은 Google Cloud리소스의 항목을 만듭니다. Dataplex Universal Catalog에서 만드는 항목을 시스템 항목이라고 합니다. Dataplex Universal Catalog는 지원되는 Google Cloud 시스템의 지속적인 메타데이터 동기화를 통해 시스템 항목을 자동으로 최신 상태로 유지합니다.

  시스템 항목에 자동으로 채워지는 메타데이터(필수 관점이라고 함)는 수정할 수 없습니다. 선택적 관점을 사용해야 시스템 항목의 메타데이터를 추가하고 수정할 수 있습니다. 자세한 내용은 관점 카테고리를 참조하세요.

• 커스텀 항목: 커스텀 리소스에 대해 만들고 관리할 수 있는 항목을 커스텀 항목이라고 합니다. 커스텀 리소스는 Google Cloud 또는 외부(예: 온프레미스)에서 호스팅되는 Google 이외 서비스의 리소스입니다.

항목 그룹

항목 그룹은 하나 이상의 항목을 위한 컨테이너입니다. 항목 그룹을 사용하여 항목의 액세스 제어 및 리전별 위치를 관리할 수 있습니다. 모든 항목 그룹이 한 프로젝트에 속합니다.

항목 그룹 카테고리

• 시스템 항목 그룹: Google Cloud 리소스의 경우 Dataplex Universal Catalog는 리소스가 있는 모든 프로젝트 및 위치의 각 시스템에 대한 항목 그룹을 자동으로 만듭니다. 예를 들어 @bigquery는 BigQuery의 시스템 항목 그룹입니다.

• 커스텀 항목 그룹: 커스텀 리소스를 위해 만드는 항목 그룹입니다.

항목 유형

항목 유형은 필수 관점 유형 세트를 사용하여 이 유형의 항목에 대한 필수 메타데이터를 정의합니다.

필수 관점 유형은 항목의 열이 아닌 항목에만 지정할 수 있습니다. 특정 항목 유형의 항목을 만들 때는 항목 유형에서 지정된 모든 필수 관점 유형의 값을 제공해야 합니다.

항목 유형 내에서 참조되는 필수 관점 유형은 항목 유형과 동일한 프로젝트에 속해야 합니다.

항목 유형 카테고리

• 커스텀 항목 유형: 사용자가 만들고 관리하는 항목 유형입니다. 이러한 항목 유형을 사용하여 커스텀 항목을 만들 수 있습니다.

• 시스템 항목 유형: Dataplex Universal Catalog는 이러한 항목 유형을 기본적으로 제공합니다. 시스템 항목 유형은 재사용 가능 및 제한됨으로 세부 분류됩니다.

  다음 표에는 시스템 항목 유형의 카테고리와 Dataplex Universal Catalog에서 각 카테고리에 제공하는 항목 유형 목록이 나와 있습니다.

  시스템 항목 유형 카테고리	설명	Dataplex Universal Catalog에서 제공하는 항목 유형
  재사용 가능 시스템 항목 유형	이 항목 유형을 사용하여 커스텀 항목을 만들 수 있습니다.	generic
  제한됨 시스템 항목 유형	Google Cloud 리소스의 항목 만들기 등의 시스템 사용을 위해 예약되어 있습니다. 이러한 항목 유형을 사용하여 항목을 만들 수는 없지만 이러한 항목 유형의 항목을 수정하여 선택적 관점을 추가할 수 있습니다.	다음이 포함되지만 이에 국한되지 않습니다. analytics-hub-exchange analytics-hub-listing aspecttype bigquery-dataset bigquery-table cloudsql-database cloudsql-instance cloudsql-table entrygroup entrytype sql-access storage storage-bucket storage-folder

특정 리전별 위치에 또는 전역 리소스로 커스텀 항목 유형을 만들 수 있습니다. 항목 유형의 위치는 적용 범위에 영향을 미칩니다. 자세한 내용은 프로젝트 및 위치 제약조건을 참조하세요.

시스템 항목 유형은 항상 전역입니다. 시스템 항목 유형은 프로젝트 ID가 655216118709인 Google 관리 프로젝트에 저장됩니다. 예를 들면 projects/655216118709/locations/global/entryTypes/bigquery-table입니다.

시작하기 전에

항목을 관리하고 커스텀 데이터 소스를 수집하기 전에 이 섹션에 설명된 작업을 완료해야 합니다.

필요한 역할

항목을 만들고 관리하는 데 필요한 권한을 얻으려면 관리자에게 리소스에 대한 다음 IAM 역할을 부여해 달라고 요청하세요.

• 항목, 항목 그룹, 항목 유형에 대한 전체 권한: Dataplex 카탈로그 관리자(roles/dataplex.catalogAdmin)
• 항목, 항목 그룹, 항목 유형을 비롯한 Dataplex Universal Catalog의 메타데이터 리소스를 만들고 관리: Dataplex 카탈로그 편집자(roles/dataplex.catalogEditor)
• 항목 관련 작업에 대한 전체 액세스 권한: Dataplex 항목 소유자(roles/dataplex.entryOwner)
• 항목, 항목 그룹, 항목 유형 및 이와 연결된 IAM 정책 보기: Dataplex 카탈로그 뷰어(roles/dataplex.catalogViewer)
• 커스텀 항목을 만들 때 관점 유형을 사용하여 해당 유형의 관점 만들기: Dataplex 관점 유형 사용자(roles/dataplex.aspectTypeUser)
• 항목 그룹 만들기 및 관리: Dataplex 항목 그룹 소유자(roles/dataplex.entryGroupOwner)
• 항목 유형 만들기 및 관리: Dataplex 항목 유형 소유자(roles/dataplex.entryTypeOwner)
• 항목 유형을 사용하여 해당 유형의 항목 만들기 및 수정: Dataplex 항목 유형 사용자(roles/dataplex.entryTypeUser)

역할 부여에 대한 자세한 내용은 프로젝트, 폴더, 조직에 대한 액세스 관리를 참조하세요.

커스텀 역할이나 다른 사전 정의된 역할을 통해 필요한 권한을 얻을 수도 있습니다.

자세한 내용은 Dataplex Universal Catalog IAM 역할을 참조하세요.

API 사용 설정

Dataplex Universal Catalog 프로젝트에서 Dataplex API를 사용 설정합니다.

API 사용 설정하기

항목 그룹 만들기

항목 유형 만들기

새 소스를 수집하려면 항목 유형을 만들어야 합니다.

커스텀 항목 만들기

커스텀 항목을 만들기 전에 항목 그룹과 항목 유형을 만들어야 합니다.

커스텀 항목을 만든 후 항목에 관점을 추가할 수 있습니다. 자세한 내용은 항목에 관점 추가를 참고하세요.

항목 그룹 관리

이 섹션에서는 사용 가능한 항목 그룹 목록을 보고, 세부정보를 보고, 항목 그룹을 업데이트하고 삭제하는 방법을 설명합니다.

사용 가능한 항목 그룹 목록 보기

항목 그룹 세부정보 보기

항목 그룹 업데이트

커스텀 항목 그룹을 업데이트할 수 있습니다. 시스템 항목 그룹은 수정할 수 없습니다.

항목 그룹 삭제

커스텀 항목 그룹을 삭제할 수 있습니다. 시스템 항목 그룹은 삭제할 수 없습니다.

항목 유형 관리

이 섹션에서는 사용 가능한 항목 그룹의 목록을 확인하고, 세부정보를 확인하고, 항목 유형을 업데이트 및 삭제하는 방법을 설명합니다.

사용 가능한 항목 유형 목록 보기

항목 유형 세부정보 보기

항목 유형 업데이트

항목 유형 삭제

다음 단계

• Dataplex Universal Catalog에서 데이터 애셋을 검색하는 방법 알아보기
• 관점을 관리하고 메타데이터를 보강하는 방법 알아보기
• Dataplex Universal Catalog로 메타데이터를 가져오는 방법 알아보기
• Dataplex Universal Catalog의 메타데이터 관리 자세히 알아보기