메타데이터Metadata
데이터의 이름 · 뜻 · 형식 · 출처 · 처리 기록을 설명하는 데이터다. 데이터 자체가 아니라 그 데이터를 찾고 이해하고 관리하는 데 쓰인다.
1요약
- 메타데이터는 DBMS 의 시스템 카탈로그(PostgreSQL 18 52장) · 데이터 사전 · 메타데이터 레지스트리(ISO/IEC 11179-1:2023) · 데이터 카탈로그(W3C DCAT 3 · 2024)에 저장되며, 그 위에서 데이터 검색 · 변경 영향 분석 · 품질 규칙 점검이 돈다.
- 열의 형식이 파일에 적혀 있지 않으면 도구가 추측한다 — 유전체 학술지 논문의 엑셀 보충 자료 가운데 약 5분의 1에서 유전자 이름이 날짜 · 숫자로 바뀐 형식 추측 오류가 확인됐다(Ziemann 2016).
- 「데이터가 이상하다」는 어느 메타데이터가 어긋났는가로 가른다 — 카탈로그의 형식이 실제 표와 다르면 기술 메타데이터 수집, 같은 이름에 정의가 둘이면 업무 메타데이터 표준, 값이 오래됐으면 운영 메타데이터(마지막 성공 실행)가 원인이다.
2등장 배경
1960년대 파일 처리 방식에서는 레코드의 필드 배치(어느 필드가 몇 바이트의 무슨 값인가)가 COBOL 프로그램의 DATA DIVISION 처럼 프로그램마다 들어 있었다. 파일 형식이 필드 하나만 바뀌어도 그 파일을 읽는 프로그램을 모두 찾아 고쳐야 했고, 어느 프로그램이 읽는지 적어 둔 곳도 없었다.
관계형 DBMS 는 표 · 열 정의를 DBMS 안의 시스템 카탈로그로 옮겼고, SQL 표준은 제품과 무관하게 같은 질의로 읽는 정보 스키마를 정했다(PostgreSQL 18 정보 스키마). 1995년 미국 오하이오주 더블린 워크숍은 웹 문서를 설명하는 15요소 Dublin Core 를 내놓았고(RFC 5013), 1997년 ISO/IEC 11179-6 은 조직 사이에 데이터 요소를 등록하는 절차를 정했다.
지금은 한 데이터가 운영 DB · 적재 작업 · 데이터 레이크 · 보고서를 거쳐 흩어지므로, 메타데이터도 한 DBMS 밖에서 모아야 한다. ISO/IEC 11179-1 은 2023년 4th Edition 으로 개정됐고, 카탈로그 교환은 W3C DCAT 3(2024), 계보 수집은 W3C PROV-O(2013)와 OpenLineage 실행 이벤트가 맡는다.
3쉽게 이해하기 — 동네 도서관의 목록 카드
동네 도서관 사서는 새 책이 들어오면 목록 카드에 제목 · 저자 · 주제를 적고, 청구기호와 쪽수를 붙여 서가에 꽂는다. 이용자는 서가를 다 뒤지지 않고 열람실 검색대에서 카드를 찾은 뒤 청구기호로 책을 꺼낸다. 책이 나갈 때마다 대출 장부에 날짜가 쌓이고, 원서 개정판이 나오면 사서는 그 원서로 만든 번역서를 찾아 담당자에게 알린다.
그림 1 · 책은 그대로 두고 카드 한 장에 설명 · 위치 · 대출 기록을 모아, 이용자는 카드로 책을 찾고 사서는 카드로 영향을 받는 책을 찾는다.
그림 2 · 청구기호 하나가 카드 · 서가 · 장부를 잇듯, 정규 이름 하나가 열의 업무 정의 · 형식 · 적재 기록을 한 줄로 묶는다.
| 비유 속 역할 | 실제 이름 | 실제로 하는 일 |
|---|---|---|
| 책 | 데이터(표 · 열 · 파일) | 메타데이터가 설명하는 대상 — 메타데이터를 고쳐도 값은 그대로다 |
| 제목 · 저자 · 주제 | 업무 메타데이터 | 이름 · 정의 · 업무 규칙 · 책임자를 사람이 등록한다 |
| 청구기호 · 판형 · 쪽수 | 기술 메타데이터 | 스키마 · 열 형식 · 제약 · 색인을 DBMS 가 시스템 카탈로그에 기록한다 |
| 대출 장부 | 운영 메타데이터 | 적재 시각 · 행 수 · 실행 성공 여부를 작업이 남긴다 |
| 목록 규칙 · 사서 | 메타데이터 관리 체계 | 명명 표준 · 등록 승인 · 책임자 지정 · 변경 통지 |
| 열람실 검색대 | 데이터 카탈로그 | 흩어진 메타데이터를 모아 검색 · 열람 화면으로 낸다 |
| 원서 → 번역서 기록 | 데이터 계보 | 어느 데이터가 어느 작업을 거쳐 어디로 갔는지 잇는다 |
| 카드함 전체 | 메타데이터 저장소(리포지터리) | 세 종류를 정규 이름 하나로 묶어 보관한다 |
⚠ 비유가 맞지 않는 곳: 사서는 카드를 손으로 쓰지만, 실제 기술 메타데이터와 운영 메타데이터는 DBMS · 적재 작업이 자동으로 만들고 사람이 쓰는 것은 업무 메타데이터뿐이다. 계보도 장부를 뒤져 찾지 않고 작업이 실행될 때마다 이벤트로 쌓인다(OpenLineage 객체 모델).
4구조 — 종류와 관리 체계
메타데이터는 두 분류 체계로 나눈다. 데이터 관리 쪽(DAMA-DMBOK2 12장)은 누가 만들고 누가 쓰나로 업무 · 기술 · 운영을 가르고, 자원 기술 쪽(NISO 2017)은 무엇에 쓰나로 기술(記述) · 구조 · 관리를 가른다. 관리 체계는 원천에서 메타데이터를 모아 저장소 하나에 정규 이름으로 묶고, 카탈로그 · 영향 분석 · 품질 점검이 그 저장소를 읽는다.
그림 3 · 원천 넷이 만든 메타데이터를 저장소 하나가 정규 이름으로 묶고, 이용 넷이 그 저장소만 읽으며, 관리 체계가 등록 규칙을 정한다.
| 종류 | 분류 체계 | 담는 것 | 예(본문 사례) | 만드는 곳 |
|---|---|---|---|---|
| 업무 메타데이터 | 데이터 관리(DAMA-DMBOK2) | 이름 · 정의 · 업무 규칙 · 책임자 | 주문 금액 = 부가세 포함 원 단위 | 데이터 관리자 · 현업이 등록 |
| 기술 메타데이터 | 데이터 관리 | 스키마 · 열 형식 · 키 · 제약 · 색인 | numeric(12,0) · NOT NULL | DBMS 시스템 카탈로그(PostgreSQL 18 52장) |
| 운영 메타데이터 | 데이터 관리 | 적재 시각 · 행 수 · 실행 결과 · 계보 | 02:14 COMPLETE · 48,210행 | 적재 작업의 실행 이벤트(OpenLineage 실행 주기) |
| 기술(記述) 메타데이터 | 자원 기술(NISO 2017) | 찾기 · 이해를 돕는 내용 정보 | 제목 · 작성자 · 주제 | Dublin Core 15요소(RFC 5013) |
| 구조 메타데이터 | 자원 기술 | 자원 부분 사이의 관계 | 쪽 순서 · 목차 · 해상도별 사본 | 문서 · 영상 저장소 |
| 관리 메타데이터 | 자원 기술 | 기술적 · 보존 · 권리 정보 | 파일 형식 · 해시 · 이용 허락 | 보존 · 권리 관리 시스템 |
ISO/IEC 11179-31 은 열 하나의 뜻을 데이터 요소 = 데이터 요소 개념(객체 클래스 + 특성) + 값 영역으로 등록한다 — 「주문 · 금액」이 개념이고 「원 단위 정수 0 ~ 999,999,999,999」가 값 영역이다. 등록 절차 · 레지스트리 구조는 MDR 이, 용어 · 형식 표준을 모은 문서는 데이터사전이 맡는다.
🔑 기술 메타데이터는 DBMS 가 자동으로 만들지만, 업무 메타데이터는 사람이 등록하지 않으면 생기지 않는다 — 관리 체계가 맡는 일은 대부분 뒤쪽이다.
5동작 — 주문 금액 열 하나의 메타데이터 수명
PostgreSQL 18 의 shop 데이터베이스에 주문 표를 만들고, 매일 02:00 적재 작업이 데이터 웨어하우스로 옮기는 사례다. 표 · 열 이름 · 행 수 · 시각은 모두 설명용 가정 값이다.
- 개발자가
CREATE TABLE sales.을 실행하면 DBMS 가 표 1행 · 열 3행을 시스템 카탈로그에 기록하고,orders (ord_no bigint PRIMARY KEY, ord_dt date NOT NULL, ord_amt numeric(12, 0) NOT NULL) ; information_schema.에서columns ord_amt의data_type= numeric ·numeric_precision= 12 로 읽힌다(PostgreSQL 18 정보 스키마). COMMENT ON COLUMN sales.로 정의 한 줄을 붙인다 — 열마다 설명은 하나만 저장되고 새 COMMENT 가 옛 설명을 덮어쓴다(PostgreSQL 18 COMMENT).orders. ord_amt IS '주문 금액 — 부가세 포함 · 원 단위'; - 데이터 관리자가 데이터 사전에 데이터 요소 「주문 금액」을 등록한다 — 개념 = 주문 · 금액, 값 영역 = 원 단위 정수 0 ~ 999,999,999,999, 책임자 = 영업 데이터 관리자(ISO/IEC 11179-31).
- 02:00 적재 작업
load_fact_sales가 START 이벤트를, 02:14 COMPLETE 이벤트를 보낸다 — 입력 =postgres://db1:5432의shop.sales.orders, 출력 =dw.fact_sales, 출력 통계 = 48,210행(OpenLineage 이름 규칙 · 실행 주기). - 데이터 카탈로그가 1 ~ 4의 결과를 정규 이름
shop.로 묶어 한 화면에 낸다 — 형식(기술) · 정의와 책임자(업무) · 마지막 적재(운영) · 계보 간선sales. orders. ord_amt orders → fact_sales → 월간 매출 보고서. ord_amt를numeric(14,2)로 바꾸자는 요청이 오자 카탈로그에서 하류 계보를 조회한다 — 표 단위로는 5곳이 걸리지만 열 단위로는fact_sales.sale_amt· 월간 매출 보고서 · 고객 등급 산출 작업 3곳이므로, 그 셋의 책임자에게만 변경을 알린다.- 다음 날 02:00 실행이 FAIL 이벤트로 끝나자 카탈로그가
dw.fact_sales에 「마지막 성공 = 전날 02:14」를 표시하고, 보고서 사용자는 숫자가 하루 늦은 까닭을 그 표시로 안다.
그림 4 · 형식은 DDL 이, 정의는 사람이, 실행 기록은 적재 작업이 만들고, 카탈로그가 셋을 정규 이름 하나로 묶은 뒤 변경 영향 · 실패를 알린다.
그림 5 · 열 단위 계보는 표 단위보다 변경 영향 범위를 좁힌다 — ord_amt 를 바꿀 때 알릴 곳은 5곳이 아니라 3곳이다.
🔑 계보는 상류로 따라가면 원인 추적, 하류로 따라가면 영향 분석이다 — 같은 간선을 반대 방향으로 읽을 뿐이고, 열 단위로 모아야 알릴 곳이 줄어든다.
6비교 — 메타데이터를 담는 네 저장 형태
| 기준 | 시스템 카탈로그 | 데이터 사전 | 메타데이터 레지스트리(MDR) | 데이터 카탈로그 |
|---|---|---|---|---|
| 범위 | DBMS 하나 | 시스템 · 사업 하나 | 조직 사이(공유 데이터 요소) | 조직 전체 원천 |
| 만드는 법 | DDL 실행 때 자동 | 사람이 작성 · 승인 | 등록 신청 → 심사 → 등록 | 원천에서 자동 수집 + 사람 보완 |
| 담는 종류 | 기술 | 업무 + 기술(용어 · 형식 표준) | 업무 의미(개념 + 값 영역) | 업무 · 기술 · 운영 · 계보 |
| 근거 표준 | SQL 정보 스키마 | 조직 표준(명명 규칙) | ISO/IEC 11179 | W3C DCAT 3 · OpenLineage |
| 계보 | 없음 | 없음 | 없음 | 작업 실행 이벤트로 수집 |
| 주 사용자 | DBMS · 개발자 | 설계자 · 데이터 관리자 | 표준 담당 · 기관 사이 교환 | 분석가 · 현업 · 데이터 관리자 |
분석DB 하나의 형식만 보면 시스템 카탈로그로 충분하고, 기관 사이 같은 뜻을 맞춰야 하면 MDR, 여러 원천을 가로질러 찾고 영향을 따라가야 하면 데이터 카탈로그를 둔다. 근거는 표의 「계보」 · 「범위」 행 — 영향 분석이 필요한 순간 계보를 담는 곳은 카탈로그뿐이다.
7실무 진단 — 어긋난 메타데이터 가르기
분석자동으로 만들어지는 기술 · 운영 메타데이터를 먼저 원천과 대조하고, 그다음 사람이 등록하는 업무 메타데이터를 본다. 기술 · 운영 쪽은 질의 한 번으로 사실이 확인되지만(PostgreSQL 18 정보 스키마 · OpenLineage 실행 주기), 업무 정의 불일치는 책임자 합의가 있어야 끝난다.
| # | 증상 | 의심 원인 | 단계 | 확인 자료 · 명령 | 판정 기준(근거) |
|---|---|---|---|---|---|
| 1 | 카탈로그의 열 형식이 실제와 다름 | 마지막 수집 뒤 DDL 변경 | 기술 · 수집 | SELECT column_name, data_type, numeric_precision FROM information_schema. | 결과 ≠ 카탈로그 값이면 카탈로그 수집 시각이 DDL 보다 앞섬(PostgreSQL 18 정보 스키마) |
| 2 | 표는 있는데 어제 값이 없음 | 적재 실패 · 중단 | 운영 | 작업의 마지막 실행 이벤트 eventType | FAIL · ABORT 이거나 마지막 COMPLETE 가 갱신 주기보다 오래됨(OpenLineage 실행 주기) |
| 3 | 열 변경 뒤 다른 팀 보고서가 깨짐 | 계보 미수집 | 계보 | 변경 열의 하류 계보 목록 | 깨진 보고서가 하류 목록에 없으면 그 보고서 작업이 입력 · 출력을 보내지 않음(OpenLineage 객체 모델) |
| 4 | 같은 「매출」이 보고서마다 다름 | 같은 이름 · 다른 정의 | 업무 · 표준 | 데이터 사전의 용어 · 정의 대조 | 한 이름에 정의가 둘 이상이면 표준 미등록(ISO/IEC 11179-1 서문 — 비슷한 이름의 다른 대상 식별) |
| 5 | 열 설명이 비어 있음 | 업무 메타데이터 미등록 | 업무 | SELECT col_description('sales.orders': | NULL 이면 설명 없음(PostgreSQL 18 COMMENT) |
기술 단계부터 보는 까닭은 카탈로그 형식이 실제와 다르면 그 위의 정의 · 계보도 낡은 수집본일 수 있기 때문이다. 그다음 실행 이벤트로 신선도를, 계보로 영향 범위를 확인하고, 남은 불일치만 업무 정의 합의로 넘긴다.
8시험 대비
www.q-net.or.kr시험에서는 종류 · 필요성을 묻는 정의 · 특징형과, 메타데이터 관리 체계를 어떻게 세우는지 묻는 구현 · 설계형이 나올 수 있다. 정의형은 두 분류 체계를 표로 나란히 두고, 설계형은 원천 → 저장소 → 이용 구조와 관리 조직 · 절차를 함께 쓴다.
- 개요 — 정의(데이터를 설명하는 데이터) · 필요성(형식 추측 오류 · 같은 이름 다른 뜻) · ISO/IEC 11179-1:2023
- 종류 — 업무 · 기술 · 운영(DAMA-DMBOK2) ↔ 기술(記述) · 구조 · 관리(NISO 2017) 분류표 + 사례 값
- 관리 체계 구조 — 그림 3 원천 · 저장소 · 이용 · 관리 체계(명명 표준 · 승인 · 책임자 · 변경 통지)
- 수명 사례 — 그림 4 순서도(DDL → 설명 → 사전 등록 → 실행 이벤트 → 카탈로그 → 변경 · 실패)
- 계보와 영향 분석 — 그림 5 열 단위 계보 그래프(하류 5곳 → 3곳) · OpenLineage · W3C PROV-O
- 저장 형태 비교와 정착 방안 — 시스템 카탈로그 · 데이터 사전 · MDR · 데이터 카탈로그 비교표 + 수집 자동화 · 책임자 지정
꼭 쓸 키워드
업무 메타데이터기술 메타데이터운영 메타데이터시스템 카탈로그정보 스키마데이터 사전메타데이터 레지스트리데이터 카탈로그데이터 계보Dublin Core
다른 답안과 차이를 내는 한 가지는 그림 5 처럼 열 단위 계보가 영향 범위를 몇 곳으로 줄이는지 숫자로 보이는 것이다.
9오해와 사실
- 오해「기술 메타데이터」와 「기술(記述) 메타데이터」는 같은 말이다.사실앞은 열 형식 · 스키마 같은 technical metadata(DAMA-DMBOK2)이고, 뒤는 제목 · 작성자 · 주제처럼 자원을 찾게 하는 descriptive metadata(NISO 2017)라 분류 축이 다르다.
- 오해메타데이터는 DBMS 가 다 만들어 준다.사실시스템 카탈로그는 표 · 열 정의 같은 스키마 메타데이터를 저장할 뿐이고(PostgreSQL 18 52장), 열 뜻 · 책임자는 COMMENT · 데이터 사전으로 사람이 넣어야 생긴다.
- 오해메타데이터를 설명하려면 그 위에 별도 계층이 또 필요하다.사실ISO/IEC 11179 레지스트리는 자기 속성도 데이터 요소로 등록해 스스로를 설명하며, 메타데이터 계층 · 단계를 따로 정하지 않는다(ISO/IEC 11179-1:2023 서문).
10핵심 정리
| 구분 | 맡는 일 | 대표 항목 | 만드는 주체 | 표준 · 근거 | 확인 방법 |
|---|---|---|---|---|---|
| 업무 메타데이터 | 뜻 · 책임 정함 | 이름 · 정의 · 책임자 | 데이터 관리자 · 현업 | DAMA-DMBOK2 12장 | 데이터 사전 · col_description() |
| 기술 메타데이터 | 형식 · 구조 기록 | 열 형식 · 키 · 제약 | DBMS(DDL 때 자동) | SQL 정보 스키마 | information_schema. |
| 운영 메타데이터 | 처리 상태 기록 | 적재 시각 · 행 수 · 결과 | 적재 작업 | OpenLineage 실행 주기 | 마지막 eventType |
| 데이터 계보 | 입력 → 출력 연결 | 작업 · 데이터셋 간선 | 실행 이벤트 수집 | OpenLineage · W3C PROV-O | 상류 = 원인 · 하류 = 영향 |
| 데이터 요소 | 뜻의 표준 단위 | 개념 + 값 영역 | 등록 · 승인 | ISO/IEC 11179-31 | 레지스트리 조회 |
| 데이터 카탈로그 | 모아서 찾게 함 | 데이터셋 · 배포 · 서비스 | 수집 + 사람 보완 | W3C DCAT 3 | 검색 · 열람 화면 |
| 기술(記述) 메타데이터 | 자원 찾기 | 제목 · 작성자 · 주제 | 작성자 · 사서 | Dublin Core 15요소 · ISO 15836 | 요소 값 대조 |
11참고 문헌
- 먼저 볼 문헌
- ★ ISO/IEC 11179-1:2023 Information technology — Metadata registries (MDR) — Part 1: Framework — 메타데이터 레지스트리의 목적과 등록의 세 가지 목표를 볼 때
- ★ PostgreSQL 18 Documentation Chapter 52 System Catalogs — DBMS 가 표 · 열 정의를 어디에 어떻게 저장하는지 볼 때
- ★ DCMI Metadata Terms — Dublin Core 15요소와 확장 용어 · ISO 15836 관계를 볼 때
- ★ OpenLineage Object Model — 작업 · 실행 · 데이터셋으로 계보를 수집하는 모델을 볼 때
- ★ Understanding Metadata: What is Metadata, and What is it For? (Jenn Riley) — 기술(記述) · 구조 · 관리 메타데이터 분류를 볼 때
- 본문 근거
- ISO/IEC 11179-31:2023 Information technology — Metadata registries (MDR) — Part 31: Metamodel for data specification registration — ISO · IEC · 2023-01 ·
www.iso.org/standard/78925.html· 확인 2026-11-04 - RFC 5013 The Dublin Core Metadata Element Set — IETF · 2007-08 ·
www.rfc-editor.org/rfc/rfc5013· 확인 2026-11-04 - Data Catalog Vocabulary (DCAT) - Version 3 — W3C · 2024-08 ·
www.w3.org/TR/vocab-dcat-3/· 확인 2026-11-04 - PROV-O: The PROV Ontology — W3C · 2013-04 ·
www.w3.org/TR/prov-o/· 확인 2026-11-04 - OpenLineage Run Cycle — OpenLineage Project · 2026-11 ·
openlineage.io/docs/spec/run-cycle· 확인 2026-11-04 - OpenLineage Naming Conventions — OpenLineage Project · 2026-11 ·
openlineage.io/docs/spec/naming· 확인 2026-11-04 - PostgreSQL 18 Documentation Chapter 35 The Information Schema — The PostgreSQL Global Development Group · 2026-11 ·
www.postgresql.org/docs/18/information-schema.html· 확인 2026-11-04 - PostgreSQL 18 Documentation COMMENT — The PostgreSQL Global Development Group · 2026-11 ·
www.postgresql.org/docs/18/sql-comment.html· 확인 2026-11-04 - DAMA-DMBOK: Data Management Body of Knowledge (2nd Edition) Chapter 12 Metadata Management — DAMA International · Technics Publications · 2017-07 ·
www.dama.org/cpages/body-of-knowledge· 확인 2026-11-04 - Gene name errors are widespread in the scientific literature (Genome Biology 17, 177) — M. Ziemann · Y. Eren · A. El-Osta · BioMed Central · 2016-08 ·
doi.org/10.1186/s13059-016-1044-7· 확인 2026-11-04