파일 시스템File System
장치의 블록 번호 위에 이름 · 디렉터리 · 크기 · 권한 같은 메타데이터를 얹어 파일로 보이게 하고, 쓰기 도중 전원이 끊겨도 그 구조가 어긋나지 않게 지키는 방식 전체다. 블록을 내주는 장치 · 배열은 스토리지 아키텍처, 시점별 사본은 데이터 백업 · 복구가 맡는다.
1요약
- 파일 시스템은 리눅스 VFS 아래에서 블록 장치의 번호를 디렉터리 · inode · 데이터 블록으로 엮는 방식(커널 VFS 문서)을 다루며, 그 위에서 데이터베이스 파일 · 로그 · 컨테이너 이미지가 이름으로 읽히고 쓰인다.
- 파일 끝에 블록 하나를 덧붙이는 일조차 데이터 · inode · 비트맵 세 블록을 따로 써야 해서, 중간에 전원이 끊기면 여섯 가지 어긋난 상태 가운데 하나가 남는다(OSTEP 42.1).
- 「충돌 뒤 파일이 이상하다」는 어긋난 것이 메타데이터인가 데이터인가로 가른다 — 마운트 전 검사가 길면 메타데이터 일관성 방식, 마운트는 빨랐는데 내용이 비면 응용의 fsync 누락이다.
2등장 배경
유닉스 초기 파일 시스템은 블록을 제자리에 덮어썼고, 비정상 종료 뒤에는 fsck 가 inode · 간접 블록 · 디렉터리 트리를 처음부터 끝까지 훑어 비트맵을 다시 만들었다. 블록 세 개가 어긋난 것을 고치려고 볼륨 전체를 읽는 셈이라, 디스크가 커지고 RAID 가 퍼지자 재부팅이 몇 시간씩 걸렸다(OSTEP 42.2).
1987년 Cedar 가 데이터베이스의 선행 기록(write-ahead logging)을 파일 시스템에 처음 들였고, 1998년 Tweedie 가 ext2 에 저널을 더한 ext3 를 내놓았다(OSTEP 42.3 · 참고 문헌 H87 · T98). 다른 쪽에서는 제자리에 덮어쓰지 않고 새 위치에 쓴 뒤 뿌리 구조만 바꾸는 CoW 가 LFS 를 거쳐 ZFS · Btrfs 로 이어졌다(OSTEP 42.4).
2003년 GFS 가 수천 대 디스크에 수백 TB 를 한 이름 공간으로 묶으면서(Ghemawat 2003), 메타데이터 서버와 데이터 노드를 나누는 분산 파일 시스템이 HDFS · CephFS 로 퍼졌다. 지금 파일 시스템의 숙제는 «메타데이터를 어떻게 한 번에 바꾸는가»와 «그 메타데이터를 몇 대에 나눠 두는가» 두 가지다.
3쉽게 이해하기 — 정전이 잦은 물류 창고
창고지기는 상자 하나를 들일 때마다 세 가지를 한다 — 빈 선반에 상자를 넣고, 재고 장부에 선반 번호를 적고, 빈 선반 표에서 그 선반을 지운다. 셋 사이에 정전이 나면 장부에는 있는데 선반이 비었거나, 선반은 찼는데 아무도 모르는 상자가 생긴다. 옛 창고는 정전 뒤마다 창고 전체 재고 조사를 했고, 이웃 창고는 할 일을 작업 일지에 먼저 적은 뒤 움직이며, 다른 창고는 빈 선반에만 새로 넣고 마지막에 입구 안내판 한 장을 바꾼다. 한 창고에 다 들어가지 않는 회사는 지점 창고 세 곳에 같은 상자를 두고 본사가 장부만 든다.
그림 1 · 정전으로 선반 · 장부 · 빈 선반 표가 어긋나면, 창고마다 재고 조사 · 작업 일지 · 안내판 교체 · 지점 분산 가운데 하나로 버틴다.
그림 2 · 상자 하나를 들이는 세 일이 따로 끝나듯 덧붙이기 한 건도 블록 셋을 따로 쓰며, 그 사이의 정전이 하위 토픽 셋이 함께 푸는 문제다.
| 비유 속 역할 | 실제 이름 | 실제로 하는 일 |
|---|---|---|
| 선반 위 상자 | 데이터 블록 | 파일 내용을 담는 장치 블록 |
| 재고 장부 | inode · 디렉터리 | 이름 → inode → 블록 번호로 파일을 찾게 한다 |
| 빈 선반 표 | 비트맵 | 어느 블록이 쓰이는지 표시한다 |
| 정전 | 충돌 · 전원 끊김 | 블록 쓰기 셋 가운데 일부만 남긴다 |
| 재고 조사 | fsck | 마운트 전에 전체 메타데이터를 훑어 맞춘다 |
| 작업 일지 | 저널 | 바꿀 메타데이터를 먼저 기록하고 커밋 표시를 남긴다 |
| 입구 안내판 | CoW 뿌리 포인터 | 새 위치에 다 쓴 뒤 포인터 하나만 바꾼다 |
| 본사 · 지점 창고 | 메타데이터 서버 · 데이터 노드 | 이름 공간과 블록 사본을 여러 서버에 나눠 둔다 |
⚠ 비유가 맞지 않는 곳: 창고지기는 상자를 넣고 곧바로 장부를 적지만, 실제 파일 시스템은 바뀐 블록을 페이지 캐시에 몇 초 모았다가 쓴다(ext4 commit 기본 5초 · 커널 ext4 관리 문서) — 그래서 정전 때 잃는 것은 «마지막 몇 초»다.
4구조 — 메타데이터 · 데이터와 세 토픽의 위치
파일 시스템은 VFS 아래 구현에서 메타데이터(디렉터리 · inode · 비트맵)와 데이터 블록을 어떻게 갱신하고 어디에 두는가를 다룬다. 시스템 호출 · 페이지 캐시는 위쪽 운영체제 입출력 구조가, 블록을 내주는 장치 · 배열은 아래쪽 스토리지 아키텍처가 맡는다.
그림 3 · 파일 시스템 구현은 메타데이터와 데이터 블록으로 나뉘고, 저널링 · CoW 는 그 갱신 순서를, 분산 파일 시스템은 그것을 둘 서버를 정한다.
| 하위 토픽 | 푸는 문제 | 메타데이터를 지키는 법 | 대표 구현 · 값(근거) |
|---|---|---|---|
| 저널링 파일 시스템 | 충돌 뒤 긴 fsck | 바꿀 블록을 저널에 먼저 쓰고 커밋 블록으로 확정 | ext4 data=ordered 기본 · commit 5초(커널 ext4 관리 문서) |
| CoW 파일 시스템(ZFS · Btrfs) | 제자리 덮어쓰기의 찢긴 쓰기 · 조용한 손상 | 덮어쓰지 않고 새 위치에 쓴 뒤 뿌리 포인터 교체 | 데이터 · 메타데이터 체크섬 · 복사 없는 스냅숏(Btrfs 문서) |
| 분산 파일 시스템(HDFS · Ceph) | 한 서버 용량 · 고장 한계 | 메타데이터 서버가 따로 저널을 쓰고, 데이터는 노드에 사본 | HDFS 블록 128 MB · 사본 3(hdfs-default.xml) · CephFS MDS 저널(CephFS 문서) |
🔑 저널링과 CoW 는 «한 장치 안에서 무엇을 먼저 쓰는가»를, 분산 파일 시스템은 «그 메타데이터를 어느 서버가 드는가»를 정한다 — 분산 쪽 메타데이터 서버도 안에서는 저널을 쓴다.
5동작 — 로그 파일 끝에 4 KiB 덧붙이기
리눅스에서 로그 파일 끝에 4 KiB 블록 하나를 덧붙이는 같은 일을 세 방식으로 따라간다. 블록 쓰기 횟수는 OSTEP 42장 프로토콜대로 직접 셌고, CoW 트리 깊이 3 은 설명용 가정 값이다.
- 응용이 write() 로 4 KiB 를 넘기면 페이지 캐시에만 남는다 — 장치에 닿게 하려면 fsync() 를 불러야 하고, 새 파일이면 디렉터리에도 fsync 가 필요하다(fsync(2)).
- 저널이 없으면 Db · I[v2] · B[v2] 세 블록을 제자리에 따로 쓴다 — 하나나 둘만 쓰인 채 멈추는 경우가 6가지이고, 그 가운데 Db 만 쓰인 경우를 뺀 5가지가 쓰레기 읽기 · 불일치 · 공간 누수를 남긴다(OSTEP 42.1).
- 다음 부팅에 fsck 가 superblock · inode · 디렉터리 트리를 모두 훑어 비트맵을 inode 기준으로 다시 만든다(OSTEP 42.2).
- ext4 기본 data=ordered 는 Db 를 제자리에 먼저 쓰고, 저널에 시작 블록 · I[v2] · B[v2] 를 쓴 뒤 커밋 블록을 쓴다 — 커밋 블록이 끝나야 트랜잭션이 확정된다(커널 ext4 관리 문서 · OSTEP 42.3).
- 체크포인트가 I[v2] · B[v2] 를 제자리로 옮긴다 — 블록 쓰기 합계 = Db 1 + 저널 4 + 체크포인트 2 = 7번으로, 저널 없는 3번의 두 배를 넘는다.
- CoW 는 Db · 새 inode 사본 · 그 위 메타데이터 노드를 빈 위치에 쓰고 마지막에 뿌리 포인터 하나를 바꾼다 — 새 블록 4개이고, 옛 블록 3개는 남아 스냅숏이 된다(OSTEP 42.4 · Btrfs 문서).
- HDFS 에서는 클라이언트가 4 KiB 를 데이터노드 3대에 파이프라인으로 흘려 3벌을 만들고, 네임노드는 블록 변경을 EditLog 에 남긴다(HDFS 설계 문서 · hdfs-default.xml).
그림 4 · 같은 4 KiB 덧붙이기가 저널 없음 3번 · 순서 저널 7번 · CoW 새 블록 4개 · HDFS 3벌 + EditLog 로 쓰기 양이 달라진다.
그림 5 · 충돌 뒤 다시 읽는 범위가 제자리 덮어쓰기는 볼륨 전체, 저널은 커밋된 기록, CoW 는 마지막 뿌리 하나로 줄어든다.
🔑 fsck 는 «어긋난 뒤 찾아서» 고치고, 저널과 CoW 는 «어긋날 수 없는 순서»로 쓴다 — 그래서 복구 비용이 볼륨 크기가 아니라 저널 크기 또는 포인터 하나로 줄어든다.
6비교 — 관련 기술과의 경계
| 기술 | 맡는 일 | 파일 시스템과의 경계 | 넘기는 곳 |
|---|---|---|---|
| 운영체제 입출력 구조 | 시스템 호출 · 페이지 캐시 · DMA 경로 | write() 가 페이지 캐시에 넣기까지는 그쪽, 블록을 어떤 순서로 쓰는가부터 이쪽 | 복사 횟수 · 대기 방식 |
| 스토리지 아키텍처 | DAS · NAS · SAN · RAID 로 블록을 내줌 | 이쪽은 받은 블록 위에 이름 · 메타데이터를 얹음 — NAS 는 파일 시스템을 장치 쪽에 둠 | 디스크 고장 · 배열 재구성 |
| 데이터 백업 · 복구 | 시점별 사본을 다른 위치에 보관 | 이쪽의 스냅숏은 같은 장치 안 사본이라 장치를 잃으면 함께 잃음 | 실수 삭제 · 랜섬웨어 · 재해 |
| 보조 기억 장치 | HDD · SSD 매체의 기록 방식 | 이쪽은 블록 번호만 보고 매체 안 배치는 모름 | 매체 수명 · 지연 |
분석「파일이 깨졌다」는 질문은 메타데이터 일관성이면 파일 시스템, 장치를 잃었으면 스토리지 아키텍처, 지운 파일을 되돌려야 하면 데이터 백업 · 복구로 보낸다. 근거는 표의 「경계」 열 — CoW 스냅숏도 같은 풀 안에 있어 장치 고장에는 사본이 되지 못한다(OpenZFS 체크섬 문서 · 자동 복구는 RAID · copies 사본이 있을 때만).
7실무 진단 — 충돌 · 손상 · 공간 문제의 위치 가르기
분석마운트 시간 → fsync 호출 → 체크섬 오류 → 사본 수 순서로 본다. 앞의 둘은 메타데이터 방식과 응용 코드에서, 뒤의 둘은 매체 · 노드에서 생기므로 고칠 주체가 다르다(tune2fs(8) · fsync(2)).
| # | 증상 | 의심 원인 | 위치 | 확인 명령 | 판정 기준(근거) |
|---|---|---|---|---|---|
| 1 | 재부팅 뒤 마운트 전 검사가 오래 걸림 | 저널 없음 | 메타데이터 일관성 | tune2fs -l /dev/sdb1 | features 에 has_ |
| 2 | 전원 장애 뒤 마지막 기록이 사라짐 | 응용이 fsync 를 부르지 않음 | 응용 ↔ 페이지 캐시 | strace -e trace= | 쓰기 뒤 fsync 줄이 없음(fsync(2)) |
| 3 | 장치 오류는 없는데 내용이 다름 | 조용한 비트 손상 | 데이터 블록 | zpool status -v | 데이터 오류가 있는 파일 목록이 나옴(zpool-status.8) |
| 4 | 공간은 남는데 새 파일을 못 만듦 | inode 고갈 | 메타데이터 | df -i | IUse% 100%(df(1)) |
| 5 | 분산 저장소 읽기 실패 · 지연 | 사본 수 부족 · 빠진 블록 | 데이터 노드 | hdfs fsck / | missing · under-replicated 블록 보고 · 이 명령은 고치지 않음(HDFS Users Guide) |
ext4 는 저널이 있어도 data=writeback 이면 데이터 순서를 지키지 않으므로(커널 ext4 관리 문서), 둘째 행에서 fsync 가 있는데도 내용이 깨지면 마운트 옵션의 data= 값을 함께 본다.
8시험 대비
www.q-net.or.kr시험에서는 파일 시스템을 메타데이터 · 데이터 블록 · 갱신 방식으로 그리게 하는 구조 · 구성형, 저널링 · CoW · 분산 파일 시스템을 견주는 비교형으로 나올 수 있다. 구조형이면 그림 3 지도에 세 토픽을 얹고, 비교형이면 «무엇을 먼저 쓰는가 · 복구 때 읽는 범위 · 사본 위치» 세 기준으로 표를 세운다.
- 개요 — 정의(블록 위의 이름 · 메타데이터) · VFS 객체 넷(superblock · inode · dentry · file)
- 구조 — 그림 3 지도(메타데이터 · 데이터 블록 · 장치 한 대 ↔ 여러 노드) + 세 토픽 표
- 일관성 문제 — 덧붙이기 블록 셋(Db · I · B) · 충돌 여섯 경우(OSTEP 42.1)
- 갱신 방식 비교 — 그림 4 쓰기 양(3 · 7 · 4 · 3벌) + 그림 5 복구 범위(볼륨 · 저널 · 뿌리)
- 분산 — 메타데이터 서버 · 데이터 노드 분리 · HDFS 128 MB · 사본 3 · EditLog
- 동향 — CoW 체크섬 · 스냅숏 · 응용의 fsync 책임
꼭 쓸 키워드
inode비트맵VFSfsck저널data=ordered체크포인트CoW스냅숏네임노드
다른 답안과 차이를 내는 한 가지는 같은 4 KiB 덧붙이기를 네 방식의 «블록 쓰기 횟수»와 «복구 때 읽는 범위» 두 숫자로 견주는 것이다.
9오해와 사실
- 오해저널링 파일 시스템이면 정전에도 데이터를 잃지 않는다.사실저널이 지키는 것은 메타데이터의 일관성이고, 커밋 전 몇 초(ext4 commit 기본 5초)의 쓰기는 잃을 수 있다(커널 ext4 관리 문서) — 잃으면 안 되는 쓰기는 응용이 fsync 로 확정한다.
- 오해write() 가 성공하면 디스크에 기록된 것이다.사실write() 는 페이지 캐시에 넣고 돌아오며, 장치까지 보내는 것은 fsync() 이고 새 파일의 디렉터리 항목은 디렉터리 fsync 가 따로 필요하다(fsync(2)).
- 오해CoW 스냅숏이 있으면 백업은 필요 없다.사실스냅숏은 같은 풀의 블록을 나눠 쓰므로 풀을 이루는 장치를 잃으면 함께 사라진다 — 다른 위치의 사본은 데이터 백업 · 복구가 다룬다(Btrfs 문서 · 복사 없는 스냅숏).
10핵심 정리
| 방식 | 먼저 쓰는 것 | 충돌 뒤 복구 | 4 KiB 덧붙이기 쓰기 | 추가로 얻는 것 | 대표 구현 |
|---|---|---|---|---|---|
| 제자리 + fsck | 순서 없음 | 볼륨 전체 검사 | 3번 | 없음 | ext2 |
| 순서 저널 | 데이터 → 저널 → 커밋 | 커밋된 트랜잭션만 다시 씀 | 7번 | 빠른 재시작 | ext4 data=ordered |
| 전체 저널 | 데이터까지 저널에 | 커밋된 트랜잭션만 다시 씀 | 8번 | 데이터 순서 보장 | ext4 data=journal |
| CoW | 새 위치 → 뿌리 교체 | 마지막 뿌리 사용 | 새 블록 4개 | 체크섬 · 스냅숏 | ZFS · Btrfs |
| 분산 | 사본 파이프라인 · EditLog | 메타데이터 서버 저널 재생 | 3벌 + 기록 | 노드 고장 견딤 · 확장 | HDFS · CephFS |
| VFS | (구현에 맡김) | (구현에 맡김) | — | 여러 구현 공존 | 리눅스 커널 |
11참고 문헌
- 먼저 볼 문헌
- ★ Operating Systems: Three Easy Pieces - Chapter 42 Crash Consistency: FSCK and Journaling (Version 1.10) — 덧붙이기 한 건이 블록 셋을 바꾸고 충돌이 여섯 가지 불일치를 남기는 까닭과 fsck · 저널 · CoW 의 차이를 볼 때
- ★ ext4 General Information - Mount options — data=ordered · journal · writeback 세 모드와 commit 5초 기본값을 볼 때
- ★ HDFS Architecture (Apache Hadoop 3.3.5) — 네임노드 · 데이터노드 분리 · EditLog · 파이프라인 복제를 볼 때
- ★ BTRFS documentation - Introduction — CoW · 데이터 · 메타데이터 체크섬 · 스냅숏을 볼 때
- 본문 근거
- Overview of the Linux Virtual File System — Linux kernel documentation · 2026-11 ·
docs.kernel.org/filesystems/vfs.html· 확인 2026-11-14 - hdfs-default.xml (Apache Hadoop 3.3.5) — Apache Software Foundation · 2026-11 ·
hadoop.apache.org/docs/stable/hadoop-project-dist/hadoop-hdfs/hdfs-default.xml· 확인 2026-11-14 - HDFS Users Guide - fsck — Apache Software Foundation · 2026-11 ·
hadoop.apache.org/docs/stable/hadoop-project-dist/hadoop-hdfs/HdfsUserGuide.html· 확인 2026-11-14 - Ceph File System (CephFS) — Ceph project · 2026-11 ·
docs.ceph.com/en/latest/cephfs/· 확인 2026-11-14 - OpenZFS documentation - Checksums — OpenZFS project · 2026-11 ·
openzfs.github.io/openzfs-docs/Basic%20Concepts/Data%20Storage/Checksums.html· 확인 2026-11-14 - zpool-status.8 (OpenZFS) — OpenZFS project · 2026-11 ·
openzfs.github.io/openzfs-docs/man/master/8/zpool-status.8.html· 확인 2026-11-14 - The Google File System - SOSP 2003 — S. Ghemawat · H. Gobioff · S.-T. Leung (Google) · 2003-10 ·
research.google/pubs/the-google-file-system/· 확인 2026-11-14 - fsync(2) Linux manual page — man7.org · 2026-11 ·
man7.org/linux/man-pages/man2/fsync.2.html· 확인 2026-11-14 - tune2fs(8) Linux manual page — e2fsprogs · man7.org · 2026-11 ·
man7.org/linux/man-pages/man8/tune2fs.8.html· 확인 2026-11-14 - df(1) Linux manual page — GNU coreutils · man7.org · 2026-11 ·
man7.org/linux/man-pages/man1/df.1.html· 확인 2026-11-14