스토리지 아키텍처Storage Architecture
저장 장치를 서버에 어떻게 연결하고, 응용에 어떤 단위(블록 · 파일 · 객체)로 보이며, 디스크 · 노드 고장을 어디서 견디는가를 정하는 구조다. 매체 한 대의 동작은 보조 기억 장치, 지난 시점으로 되돌리는 일은 데이터 백업 · 복구가 맡는다.
1요약
- 스토리지 아키텍처는 스토리지 가운데 연결 · 접근 단위 · 보호 세 가지를 정하는 구조로, DAS · NAS · SAN 과 NVMe-oF 가 연결을, 객체 스토리지가 접근 단위를, RAID · 이레이저 코딩 · SDS 가 보호와 확장을 맡고 그 위에서 파일 시스템 · 데이터베이스 · 백업 소프트웨어가 돈다.
- 보호 방식이 디스크 값을 정한다 — 같은 데이터를 세 벌 두는 복제는 추가 용량 200% 를 쓰지만, 이레이저 코딩은 보통 50% 이하로 같은 수준의 고장을 견딘다(HDFS EC 문서).
- 「노드 하나가 죽자 클러스터 전체가 느려졌다」는 보호 방식으로 가른다 — 복제면 사본 하나를 복사하고, 이레이저 코딩 k+m 이면 조각 하나를 되살리려 k개를 읽어 망 트래픽이 k배가 되며, RAID 어레이면 재구축이 장치 안에서 끝나 망은 조용하다.
2등장 배경
디스크가 서버 안에만 있던 때에는 서버를 바꾸면 데이터를 옮겨야 했고, 디스크 한 대의 고장이 그 서버의 데이터 손실이었다. 1988년 Patterson · Gibson · Katz 가 디스크 묶음 안에 패리티를 두는 RAID 를 정리했고(Patterson 1988), 저장 장치를 망 너머로 뺀 NAS · SAN 이 자리 잡으며 «전용 어레이 한 대를 키우는» 구조가 표준이 됐다.
어레이 한 대가 키울 수 있는 크기에는 끝이 있었다. 2006년 Weil 등은 할당 표 대신 계산으로 위치를 정하는 CRUSH 와, CPU · 망 · 디스크를 함께 가진 객체 저장 장치(OSD)에 복제 · 복구를 맡기는 구조를 냈다(Weil 2006) — 범용 서버를 늘려 키우는 SDS 와 객체 스토리지의 바탕이다. 사본 대신 Reed · Solomon 부호(Reed · Solomon 1960)로 패리티를 만드는 이레이저 코딩이 그 클러스터의 용량 문제를 풀었다.
플래시가 빨라지자 이번에는 망이 병목이 됐다. 2016년 6월 NVMe over Fabrics 1.0 이 NVMe 명령을 RDMA · Fibre Channel 망으로 보냈고(NVMe-oF 1.0), 2021년 NVMe 2.0 에서 그 내용이 Base · TCP · RDMA 사양으로 흡수됐다(NVM Express 안내). 지금도 어레이와 클러스터가 함께 쓰이므로 둘 중 무엇을 어디에 고르는가가 스토리지 아키텍처의 일이다.
3쉽게 이해하기 — 짐을 맡기는 창고 회사
꽃집 사장은 짐을 네 가지로 둔다. 가게 뒷방에 두거나, 상인들이 함께 쓰는 공용 서류함에 폴더째 두거나, 전용 도로로 창고 칸 번호를 찾아가 직접 넣거나, 접수 창구에 이름표를 붙여 통째로 맡긴다. 창고 회사 「든든창고」의 배차 사무실은 맡은 짐을 네 상자로 나누고 복원 상자 둘을 더 만들어 지점 여섯 곳에 하나씩 보낸다. 지점 두 곳이 물에 잠겨도 남은 상자 넷으로 짐을 다시 꾸린다.
그림 1 · 짐을 맡기는 길은 연결 방식과 접근 단위에, 배차 사무실과 나눠 담기 · 선반은 SDS 와 보호 방식에 짝지어진다.
그림 2 · 한 건물 선반에 나눠 담은 짐은 건물째 잃지만, 지점 여섯에 나눠 보낸 짐은 지점 둘을 잃어도 남는다 — 보호를 둔 자리가 견디는 고장의 크기를 정한다.
| 비유 | 실제 이름 | 실제로 하는 일 |
|---|---|---|
| 가게 뒷방 | DAS | 서버 한 대에 직접 붙은 저장 장치 |
| 공용 서류함 | NAS | 파일 이름 · 폴더로 여러 서버가 나눠 쓴다 |
| 전용 도로 · 칸 번호 | SAN · NVMe-oF | 블록 번호로 읽고 쓰는 저장 전용 연결 |
| 이름표 창구 | 객체 스토리지 | 이름 · 메타데이터로 객체를 통째 저장 · 조회 |
| 배차 사무실 | SDS | 범용 서버 여러 대를 소프트웨어가 한 저장소로 운영 |
| 네 상자 + 복원 둘 | 이레이저 코딩 | 데이터 조각 k + 패리티 조각 m 을 노드마다 분산 |
| 지점 안 선반 | RAID | 장치 한 대 안의 디스크끼리 패리티 · 미러 |
| 다시 꾸리기 | 복구 · 재구축 | 남은 조각으로 잃은 조각을 다시 만든다 |
⚠ 비유가 맞지 않는 곳: 복원 상자는 짐의 사본이 아니라 네 상자에서 계산한 값이라 그것만으로는 짐을 꺼낼 수 없다. 또 실제 SDS 에는 배차 사무실 한 곳이 없고, 클라이언트와 노드가 같은 계산으로 위치를 찾는다(Weil 2006 CRUSH).
4구조 — 연결 · 접근 단위 · 보호의 지도
아래 토픽 여섯은 세 질문에 나눠 답한다. 왼쪽 열은 장비 한 대를 키우는 전용 어레이, 오른쪽 열은 범용 서버 대수를 늘리는 클러스터이고, 같은 행끼리 서로 대안이다.
그림 3 · 연결 · 보이는 단위 · 보호 세 행에서 왼쪽은 어레이 한 대 안에, 오른쪽은 서버 여러 대에 걸쳐 답하며, SDS 가 오른쪽 열의 배치 · 복구를 소프트웨어로 맡는다.
| 하위 토픽 | 답하는 질문 | 보이는 단위 | 고장 단위 | 기준 값(근거) |
|---|---|---|---|---|
| DAS · NAS · SAN | 장치를 서버 안 · 파일 망 · 블록 망 어디에 | 블록 · 파일 | 디스크 · 장치 | 위치 두 분류(NIST SP 800-209 2장) |
| NVMe-oF | 플래시를 망 너머에서 NVMe 명령 그대로 | 블록(네임스페이스) | 경로 | TCP 기본 포트 4420(nvme-connect 문서) |
| 객체 스토리지 | 이름 하나로 통째 저장 · 조회 | 객체 + 메타데이터 | 노드 | 객체 서비스 분류(NIST SP 800-209 2장) |
| RAID | 장치 안 디스크 고장을 견디나 | 스트라이프 | 디스크 | 패리티 · 미러 레벨(Patterson 1988) |
| 이레이저 코딩 | 사본보다 적은 용량으로 노드 고장을 견디나 | 조각 k + m | 노드 · 랙 | 용량 배수 (k+m)/k(Ceph EC 문서) |
| SDS(소프트웨어 정의 스토리지) | 범용 서버를 한 저장소로 | 블록 · 파일 · 객체 | 노드 | 할당 표 없는 배치 계산(Weil 2006) |
디스크 · SSD 의 매체와 명령은 보조 기억 장치, 블록을 파일로 묶는 일은 파일 시스템이 맡는다. 스토리지 아키텍처는 «장치 · 노드를 어떻게 이어 묶는가»까지 다룬다.
🔑 보호를 어디에 두느냐가 견디는 고장의 크기를 정한다 — RAID 는 장치 안 디스크의 고장을, 복제 · 이레이저 코딩은 장치(노드) 자체의 고장을 견딘다.
5동작 — 객체 하나가 이레이저 코딩 클러스터에 저장 · 복구되기까지
설명용 가정 값 = 범용 서버 6대 SDS 클러스터 · 객체 풀 k=4 · m=2 · 고장 단위 호스트 · 객체 scan-0001.tif 4 MiB.
- 응용이 HTTP PUT 으로 객체 이름 · 메타데이터 · 4 MiB 본문을 게이트웨이에 보낸다 — 응용은 디스크 위치를 모르고 이름만 안다.
- SDS 소프트웨어가 이름의 해시로 배치 그룹을 정하고, 배치 규칙이 서로 다른 호스트 6대를 고른다 — 위치는 표를 찾지 않고 계산한다(Weil 2006 · Ceph EC 문서 crush-failure-domain=host).
- 객체를 1 MiB 데이터 조각 4개로 나누고 패리티 조각 2개를 계산한다 — 저장량은 6 MiB, 3중 복제였다면 12 MiB 다(배수 (k+m)/k = 1.5 · 원문 식 직접 계산).
- 조각 6개가 호스트 6대의 SSD 에 하나씩 쓰인다 — 한 호스트에 같은 객체의 조각이 둘 놓이지 않는다.
- 호스트 2가 멈추면 그 배치 그룹은 degraded 가 되지만, 남은 조각 5개 중 4개로 객체를 읽는다 — m=2 라 2대까지 잃어도 된다(Ceph 상태 점검 문서 PG_DEGRADED · Ceph EC 문서).
- 복구는 잃은 조각 1 MiB 를 만들려고 다른 호스트 4대에서 4 MiB 를 읽어 새 호스트에 쓴다 — 복제였다면 1 MiB 를 복사하면 끝난다.
그림 4 · 객체 하나는 이름 해시로 호스트 6대에 조각 4 + 2 로 흩어지고, 호스트 하나를 잃으면 남은 조각 4개 · 4 MiB 를 읽어 1 MiB 를 되살린다.
같은 데이터 1 TB 를 방식별로 두면 원시 용량 · 견디는 대수 · 복구 때 읽는 양이 서로 맞바뀐다.
그림 5 · 1 TB 를 3중 복제로 두면 3.0 TB 가 들지만 복구 때 1개만 읽고, 이레이저 코딩 4+2 는 1.5 TB 로 같은 2대 고장을 견디는 대신 복구 때 4개를 읽는다.
🔑 이레이저 코딩은 용량을 (k+m)/k 로 줄이는 대신 조각 하나를 되살릴 때마다 k개를 읽는다 — 아낀 디스크 값을 복구 때 망 · CPU 로 낸다.
6비교 — 관련 기술과의 경계
| 기술 | 맡는 일 | 경계 | 넘기는 곳 |
|---|---|---|---|
| 스토리지 아키텍처 | 연결 · 접근 단위 · 보호 · 확장 구조 | 장치 · 노드를 어떻게 이어 묶나 | 볼륨 안 이름 정리 → 파일 시스템 |
| 파일 시스템 | 블록을 파일 · 디렉터리로 · 저널 · CoW | 볼륨 하나 안의 정리 | 볼륨 아래 장치 · 노드 → 스토리지 아키텍처 |
| 데이터 백업 · 복구 | 지난 시점 사본 · 복구 목표 | 실수 삭제 · 악성 암호화 대비 | 지금 데이터의 고장 대비 → 스토리지 아키텍처 |
| 보조 기억 장치 | HDD · SSD · 인터페이스 | 장치 한 대의 매체 · 명령 | 장치 여럿 묶기 → 스토리지 아키텍처 |
| 클라우드 스토리지 · 네트워크 | 빌려 쓰는 볼륨 · 버킷 · 가상 망 | 공급자가 안쪽 구조를 숨김 | 안쪽 구조 원리 → 스토리지 아키텍처 |
분석스토리지 아키텍처는 «지금 있는 데이터가 장치 · 노드 고장에도 남는가»까지 맡고, «지난 시점으로 되돌리기»는 백업 · 복구에서 본다. RAID · 이레이저 코딩은 쓰기 · 지우기를 모든 조각에 그대로 반영하는 같은 시점의 중복이라, 지난 시점 사본은 따로 있어야 한다(NIST SP 800-209 백업 · 복제 구분).
7실무 진단 — 스토리지 문제를 하위 토픽으로 가르기
분석먼저 «보호가 줄었는가»(고장 · 복구 중)를 보고, 다음 연결 경로, 마지막으로 용량 배수를 본다. 복구 중에 잰 성능은 평소 값이 아니기 때문이다(Ceph 상태 점검 문서 PG_DEGRADED).
| # | 증상 | 의심 원인 | 하위 토픽 | 확인 명령 | 판정 기준(근거) |
|---|---|---|---|---|---|
| 1 | 호스트 한 대 고장 뒤 클러스터 전체가 느림 | 이레이저 코딩 복구 읽기 | 이레이저 코딩 · SDS | ceph health detail | PG_ |
| 2 | 디스크 교체 뒤 서버 한 대만 느림 | 어레이 재구축 | RAID | cat /proc/mdstat | 배열 줄에 recovery 진행률이 보이면 재구축 중(md(4)) |
| 3 | 원격 NVMe 볼륨이 가끔 끊김 | 경로 하나 소실 | NVMe-oF | nvme list-subsys | 경로(traddr · trsvcid) 수가 구성보다 적으면 망 쪽(nvme-list-subsys 문서) |
| 4 | 용량이 예상보다 두 배 빨리 참 | 풀이 3중 복제 | 이레이저 코딩 · SDS | ceph osd pool get <풀> size | 복제 풀은 size = 사본 수(기본 3) · EC 풀은 size = k+m(Ceph 풀 문서) |
1 · 4행은 오픈소스 Ceph 명령이고, 다른 SDS 도 배치 그룹 · 풀 상태 화면에서 같은 판정을 한다. 1 · 2행을 끝내고 3행을 본다 — 복구 트래픽이 망을 채우면 경로가 멀쩡해도 지연이 늘기 때문이다.
8시험 대비
www.q-net.or.kr시험에서는 DAS · NAS · SAN 이나 복제 · 이레이저 코딩을 견주는 비교형, 그리고 스토리지 구성 요소를 그리는 구조 · 구성형이 나올 수 있다. 어느 쪽이든 «연결 → 보이는 단위 → 보호» 세 질문을 먼저 세우고, 묻는 토픽을 그 행과 열(어레이 · 클러스터)에 놓는다.
- 개요 — 정의 · 세 질문(연결 · 보이는 단위 · 보호) · 어레이에서 클러스터로(RAID 1988 · CRUSH 2006)
- 구성 — 그림 3 지도(어레이 열 · 클러스터 열) + 하위 토픽 표(고장 단위)
- 동작 — 그림 4 객체 하나의 저장 · 복구(4+2 · 6 MiB · 복구 읽기 4 MiB)
- 비교 — 그림 5 복제 · EC 2+2 · 4+2 · 6+3 의 원시 용량 · 견디는 대수 · 복구 읽기
- 선택 기준 — 고장 단위(디스크 · 노드) · 지연(NVMe-oF) · 접근 단위(객체)
- 동향 — NVMe 2.0 사양 흡수 · NVMe/TCP · 범용 서버 SDS
꼭 쓸 키워드
고장 단위스케일 업스케일 아웃블록파일객체용량 배수복구 읽기배치 계산패리티네임스페이스
다른 답안과 차이를 내는 한 가지는 그림 5 처럼 용량 배수와 복구 읽기를 한 그림에 놓아 «아낀 용량의 값»을 보이는 것이다.
9오해와 사실
- 오해이레이저 코딩의 패리티 조각은 데이터의 사본이다.사실패리티는 데이터 조각 k개에서 계산한 값이라, 읽을 때는 어느 것이든 조각 k개가 남아 있어야 원래 객체가 나온다(Ceph EC 문서).
- 오해NVMe-oF 는 NVMe SSD 를 넣은 SAN 의 다른 이름이다.사실NVMe-oF 는 망 너머로 보내는 명령 체계이고, 같은 SSD 라도 iSCSI 로 붙이면 SCSI 명령으로 오간다 — 지금은 NVMe Base · TCP · RDMA 사양에 들어 있다(NVM Express 안내).
- 오해SDS 는 스토리지 가상화와 같다.사실가상화는 기존 장치 앞에 주소 변환 계층을 두는 일이고, SDS 는 범용 서버의 디스크로 배치 · 복제 · 복구까지 소프트웨어가 하는 저장소 자체다(Weil 2006).
10핵심 정리
| 하위 토픽 | 고르는 때 | 고장 단위 | 키우는 법 | 확인 자료 | 넘기는 것 |
|---|---|---|---|---|---|
| DAS · NAS · SAN | 서버 몇 대가 블록 · 파일을 나눠 쓸 때 | 디스크 · 장치 | 장치를 키움 | lsblk · 마운트 표 | 볼륨 안 정리 = 파일 시스템 |
| NVMe-oF | 망 너머 플래시를 낮은 지연으로 | 경로 | 경로 · 대상 추가 | nvme list-subsys | 매체 명령 = 보조 기억 장치 |
| 객체 스토리지 | 이름으로 통째 읽는 대량 데이터 | 노드 | 노드 추가 | 버킷 · 객체 메타데이터 | 서비스형 버킷 = 클라우드 |
| RAID | 장치 안 디스크 고장 대비 | 디스크 | 디스크 · 그룹 추가 | /proc/mdstat | 지난 시점 = 백업 · 복구 |
| 이레이저 코딩 | 노드 고장 대비 · 용량 절약 | 노드 · 랙 | k · m 조정 | 프로필 k · m | 복구 트래픽 계획 = SDS |
| SDS(소프트웨어 정의 스토리지) | 범용 서버로 크게 키울 때 | 노드 | 서버 추가 | ceph health detail | 주소 변환 계층 = 스토리지 가상화 |
11참고 문헌
- 먼저 볼 문헌
- ★ NIST SP 800-209 Security Guidelines for Storage Infrastructure — 저장 자원의 위치와 블록 · 파일 · 객체 서비스 분류를 볼 때
- ★ Ceph Documentation - Erasure code — k · m 의 뜻 · 기본 프로필 · 용량 배수 (k+m)/k 를 볼 때
- ★ Apache Hadoop HDFS Erasure Coding — 3중 복제 200% 와 이레이저 코딩 50% 추가 용량 · 기본 정책 RS-6-3-1024k 를 볼 때
- ★ Weil et al. 2006 Ceph: A Scalable, High-Performance Distributed File System (OSDI 2006) — 할당 표 대신 계산으로 위치를 정하는 CRUSH 와 객체 저장 장치(OSD)의 출발을 볼 때
- ★ What happened to the NVMe-oF specification? — NVMe-oF 내용이 NVMe 2.0 의 Base · TCP · RDMA 사양으로 옮겨진 것을 볼 때
- 본문 근거
- NVM Express over Fabrics Revision 1.0 — NVM Express · 2016-06 ·
www.nvmexpress.org/wp-content/uploads/NVMe_over_Fabrics_1_0_Gold_20160605-1.pdf· 확인 2026-11-14 - NVM Express Specifications — NVM Express · 2026-08 ·
nvmexpress.org/specifications/· 확인 2026-11-14 - A Case for Redundant Arrays of Inexpensive Disks (RAID) - Proceedings of the 1988 ACM SIGMOD Conference pp. 109-116 — D. A. Patterson · G. A. Gibson · R. H. Katz (UC Berkeley) · 1988-06 ·
doi.org/10.1145/50202.50214· 확인 2026-11-14 - Reed and Solomon 1960 Polynomial Codes over Certain Finite Fields (Journal of the SIAM 8(2)) — SIAM · 1960-06 ·
doi.org/10.1137/0108018· 확인 2026-11-14 - Ceph Documentation - Health checks — Ceph project · 2026-11 ·
docs.ceph.com/en/latest/rados/operations/health-checks/· 확인 2026-11-14 - Ceph Documentation - Pools — Ceph project · 2026-11 ·
docs.ceph.com/en/latest/rados/operations/pools/· 확인 2026-11-14 - nvme-connect(1) documentation — nvme-cli project · 2026-11 ·
github.com/linux-nvme/nvme-cli/blob/master/Documentation/nvme-connect.txt· 확인 2026-11-14 - nvme-list-subsys(1) documentation — nvme-cli project · 2026-11 ·
github.com/linux-nvme/nvme-cli/blob/master/Documentation/nvme-list-subsys.txt· 확인 2026-11-14 - md(4) Linux manual page — man7.org · 2026-11 ·
man7.org/linux/man-pages/man4/md.4.html· 확인 2026-11-14