IT › 컴퓨터 시스템 › 스토리지

파일 시스템File System

장치의 블록 번호 위에 이름 · 디렉터리 · 크기 · 권한 같은 메타데이터를 얹어 파일로 보이게 하고, 쓰기 도중 전원이 끊겨도 그 구조가 어긋나지 않게 지키는 방식 전체다. 블록을 내주는 장치 · 배열은 스토리지 아키텍처, 시점별 사본은 데이터 백업 · 복구가 맡는다.

1요약

  1. 파일 시스템은 리눅스 VFS 아래에서 블록 장치의 번호를 디렉터리 · inode · 데이터 블록으로 엮는 방식(커널 VFS 문서)을 다루며, 그 위에서 데이터베이스 파일 · 로그 · 컨테이너 이미지가 이름으로 읽히고 쓰인다.
  2. 파일 끝에 블록 하나를 덧붙이는 일조차 데이터 · inode · 비트맵 세 블록을 따로 써야 해서, 중간에 전원이 끊기면 여섯 가지 어긋난 상태 가운데 하나가 남는다(OSTEP 42.1).
  3. 「충돌 뒤 파일이 이상하다」는 어긋난 것이 메타데이터인가 데이터인가로 가른다 — 마운트 전 검사가 길면 메타데이터 일관성 방식, 마운트는 빨랐는데 내용이 비면 응용의 fsync 누락이다.

2등장 배경

유닉스 초기 파일 시스템은 블록을 제자리에 덮어썼고, 비정상 종료 뒤에는 fsck 가 inode · 간접 블록 · 디렉터리 트리를 처음부터 끝까지 훑어 비트맵을 다시 만들었다. 블록 세 개가 어긋난 것을 고치려고 볼륨 전체를 읽는 셈이라, 디스크가 커지고 RAID 가 퍼지자 재부팅이 몇 시간씩 걸렸다(OSTEP 42.2).

1987년 Cedar 가 데이터베이스의 선행 기록(write-ahead logging)을 파일 시스템에 처음 들였고, 1998년 Tweedie 가 ext2 에 저널을 더한 ext3 를 내놓았다(OSTEP 42.3 · 참고 문헌 H87 · T98). 다른 쪽에서는 제자리에 덮어쓰지 않고 새 위치에 쓴 뒤 뿌리 구조만 바꾸는 CoW 가 LFS 를 거쳐 ZFS · Btrfs 로 이어졌다(OSTEP 42.4).

2003년 GFS 가 수천 대 디스크에 수백 TB 를 한 이름 공간으로 묶으면서(Ghemawat 2003), 메타데이터 서버와 데이터 노드를 나누는 분산 파일 시스템이 HDFS · CephFS 로 퍼졌다. 지금 파일 시스템의 숙제는 «메타데이터를 어떻게 한 번에 바꾸는가»와 «그 메타데이터를 몇 대에 나눠 두는가» 두 가지다.

3쉽게 이해하기 — 정전이 잦은 물류 창고

창고지기는 상자 하나를 들일 때마다 세 가지를 한다 — 빈 선반에 상자를 넣고, 재고 장부에 선반 번호를 적고, 빈 선반 표에서 그 선반을 지운다. 셋 사이에 정전이 나면 장부에는 있는데 선반이 비었거나, 선반은 찼는데 아무도 모르는 상자가 생긴다. 옛 창고는 정전 뒤마다 창고 전체 재고 조사를 했고, 이웃 창고는 할 일을 작업 일지에 먼저 적은 뒤 움직이며, 다른 창고는 빈 선반에만 새로 넣고 마지막에 입구 안내판 한 장을 바꾼다. 한 창고에 다 들어가지 않는 회사는 지점 창고 세 곳에 같은 상자를 두고 본사가 장부만 든다.

정전 충돌 · 전원 끊김 창고 파일 시스템 선반 위 상자 데이터 블록 재고 장부 inode · 디렉터리 빈 선반 표 비트맵 재고 조사 fsck 창고 전체를 훑는다 작업 일지 저널링 할 일을 먼저 적는다 새 선반 · 안내판 CoW 입구 안내판만 바꾼다 본사 · 지점 셋 분산 파일 시스템 상자를 세 곳에 둔다 1 2 3 4 5 2 는 사고 뒤에 고치고, 3 · 4 는 사고가 나도 어긋나지 않게 미리 순서를 정한다 5 는 창고 한 곳이 통째로 사라지는 경우까지 대비한다

그림 1 · 정전으로 선반 · 장부 · 빈 선반 표가 어긋나면, 창고마다 재고 조사 · 작업 일지 · 안내판 교체 · 지점 분산 가운데 하나로 버틴다.

상자 넣기빈 선반에 상자를 둠
장부 적기선반 번호를 기록
빈 선반 표그 선반을 지움
정전셋 중 일부만 끝남
일지 · 안내판미리 정한 순서로 버팀
지점 분산같은 상자를 세 곳에
비유 — 상자 하나 들이기 실제 — 4 KiB 덧붙이기 선반에 상자 넣기 1 Db 데이터 블록을 5번에 씀 장부에 선반 번호 적기 2 I[v2] inode 가 5번을 가리킴 빈 선반 표에서 지우기 3 B[v2] 비트맵 5번 = 사용 정전 — 셋 가운데 2 만 끝났을 때 장부에는 있는데 선반이 빔 빈 선반 표는 아직 «빈 선반» I 만 쓰임 → 5번의 옛 내용을 읽음 inode ↔ 비트맵 불일치 · 여섯 경우 중 하나 세 일의 순서와 «한꺼번에 끝났다는 표시»를 어떻게 정하는가가 하위 토픽마다 다르다

그림 2 · 상자 하나를 들이는 세 일이 따로 끝나듯 덧붙이기 한 건도 블록 셋을 따로 쓰며, 그 사이의 정전이 하위 토픽 셋이 함께 푸는 문제다.

비유 속 역할실제 이름실제로 하는 일
선반 위 상자데이터 블록파일 내용을 담는 장치 블록
재고 장부inode · 디렉터리이름 → inode → 블록 번호로 파일을 찾게 한다
빈 선반 표비트맵어느 블록이 쓰이는지 표시한다
정전충돌 · 전원 끊김블록 쓰기 셋 가운데 일부만 남긴다
재고 조사fsck마운트 전에 전체 메타데이터를 훑어 맞춘다
작업 일지저널바꿀 메타데이터를 먼저 기록하고 커밋 표시를 남긴다
입구 안내판CoW 뿌리 포인터새 위치에 다 쓴 뒤 포인터 하나만 바꾼다
본사 · 지점 창고메타데이터 서버 · 데이터 노드이름 공간과 블록 사본을 여러 서버에 나눠 둔다

⚠ 비유가 맞지 않는 곳: 창고지기는 상자를 넣고 곧바로 장부를 적지만, 실제 파일 시스템은 바뀐 블록을 페이지 캐시에 몇 초 모았다가 쓴다(ext4 commit 기본 5초 · 커널 ext4 관리 문서) — 그래서 정전 때 잃는 것은 «마지막 몇 초»다.

4구조 — 메타데이터 · 데이터와 세 토픽의 위치

파일 시스템은 VFS 아래 구현에서 메타데이터(디렉터리 · inode · 비트맵)와 데이터 블록을 어떻게 갱신하고 어디에 두는가를 다룬다. 시스템 호출 · 페이지 캐시는 위쪽 운영체제 입출력 구조가, 블록을 내주는 장치 · 배열은 아래쪽 스토리지 아키텍처가 맡는다.

응용 open · write · fsync — 위쪽은 운영체제 입출력 구조 VFS superblock · inode · dentry · file 객체 파일 시스템 구현 메타데이터 디렉터리 · inode · 비트맵 데이터 블록 블록 장치 한 대 디스크 · 볼륨 여러 노드 네트워크로 묶은 서버 저널링 파일 시스템 메타데이터를 저널에 먼저 · 커밋 뒤 제자리 CoW 파일 시스템 새 위치에 쓰고 뿌리 교체 · 체크섬 · 스냅숏 분산 파일 시스템 메타데이터 서버 · 데이터 노드 · 사본 3벌 아래쪽 = 스토리지 아키텍처 · 보조 기억 장치(블록을 내주는 배열 · 매체) 옆 = 데이터 백업 · 복구(시점별 사본 · 다른 위치 보관) 메타데이터 데이터 기록 · 사본 위치 · 포인터 이름표 선 = 그 토픽이 바꾸는 부분 · 위 두 토픽은 갱신 순서, 아래 토픽은 두는 서버를 정한다

그림 3 · 파일 시스템 구현은 메타데이터와 데이터 블록으로 나뉘고, 저널링 · CoW 는 그 갱신 순서를, 분산 파일 시스템은 그것을 둘 서버를 정한다.

하위 토픽푸는 문제메타데이터를 지키는 법대표 구현 · 값(근거)
저널링 파일 시스템충돌 뒤 긴 fsck바꿀 블록을 저널에 먼저 쓰고 커밋 블록으로 확정ext4 data=ordered 기본 · commit 5초(커널 ext4 관리 문서)
CoW 파일 시스템(ZFS · Btrfs)제자리 덮어쓰기의 찢긴 쓰기 · 조용한 손상덮어쓰지 않고 새 위치에 쓴 뒤 뿌리 포인터 교체데이터 · 메타데이터 체크섬 · 복사 없는 스냅숏(Btrfs 문서)
분산 파일 시스템(HDFS · Ceph)한 서버 용량 · 고장 한계메타데이터 서버가 따로 저널을 쓰고, 데이터는 노드에 사본HDFS 블록 128 MB · 사본 3(hdfs-default.xml) · CephFS MDS 저널(CephFS 문서)

🔑 저널링과 CoW 는 «한 장치 안에서 무엇을 먼저 쓰는가»를, 분산 파일 시스템은 «그 메타데이터를 어느 서버가 드는가»를 정한다 — 분산 쪽 메타데이터 서버도 안에서는 저널을 쓴다.

5동작 — 로그 파일 끝에 4 KiB 덧붙이기

리눅스에서 로그 파일 끝에 4 KiB 블록 하나를 덧붙이는 같은 일을 세 방식으로 따라간다. 블록 쓰기 횟수는 OSTEP 42장 프로토콜대로 직접 셌고, CoW 트리 깊이 3 은 설명용 가정 값이다.

  1. 응용이 write() 로 4 KiB 를 넘기면 페이지 캐시에만 남는다 — 장치에 닿게 하려면 fsync() 를 불러야 하고, 새 파일이면 디렉터리에도 fsync 가 필요하다(fsync(2)).
  2. 저널이 없으면 Db · I[v2] · B[v2] 세 블록을 제자리에 따로 쓴다 — 하나나 둘만 쓰인 채 멈추는 경우가 6가지이고, 그 가운데 Db 만 쓰인 경우를 뺀 5가지가 쓰레기 읽기 · 불일치 · 공간 누수를 남긴다(OSTEP 42.1).
  3. 다음 부팅에 fsck 가 superblock · inode · 디렉터리 트리를 모두 훑어 비트맵을 inode 기준으로 다시 만든다(OSTEP 42.2).
  4. ext4 기본 data=ordered 는 Db 를 제자리에 먼저 쓰고, 저널에 시작 블록 · I[v2] · B[v2] 를 쓴 뒤 커밋 블록을 쓴다 — 커밋 블록이 끝나야 트랜잭션이 확정된다(커널 ext4 관리 문서 · OSTEP 42.3).
  5. 체크포인트가 I[v2] · B[v2] 를 제자리로 옮긴다 — 블록 쓰기 합계 = Db 1 + 저널 4 + 체크포인트 2 = 7번으로, 저널 없는 3번의 두 배를 넘는다.
  6. CoW 는 Db · 새 inode 사본 · 그 위 메타데이터 노드를 빈 위치에 쓰고 마지막에 뿌리 포인터 하나를 바꾼다 — 새 블록 4개이고, 옛 블록 3개는 남아 스냅숏이 된다(OSTEP 42.4 · Btrfs 문서).
  7. HDFS 에서는 클라이언트가 4 KiB 를 데이터노드 3대에 파이프라인으로 흘려 3벌을 만들고, 네임노드는 블록 변경을 EditLog 에 남긴다(HDFS 설계 문서 · hdfs-default.xml).
방식 장치에 쓰는 블록(쓰는 순서대로) 합계 저널 없음 제자리 덮어쓰기 2 Db I B 순서 보장 없음 3번 순서 저널 ext4 data=ordered Db 시작 I B 커밋 I B 4 5 7번 제자리 저널 — 커밋이 끝나야 확정 체크포인트 CoW 트리 깊이 3 가정 6 새 Db 새 I 새 노드 뿌리 옛 블록 3개 = 스냅숏 4개 HDFS 사본 3 · 파이프라인 7 노드 1 Db 노드 2 Db 노드 3 Db EditLog 3벌 + 1 데이터 메타데이터(제자리) 저널 기록 · 사본 뿌리 포인터 남겨 둔 옛 블록 번호 = 동작 목록 단계 · 4 KiB · 트리 깊이 3 = 설명용 가정 값

그림 4 · 같은 4 KiB 덧붙이기가 저널 없음 3번 · 순서 저널 7번 · CoW 새 블록 4개 · HDFS 3벌 + EditLog 로 쓰기 양이 달라진다.

방식 재시작 때 읽는 범위(막대 = 같은 볼륨) 제자리 + fsck 3 inode · 간접 블록 · 디렉터리 트리 전부 볼륨 크기에 비례 — 디스크가 커질수록 길어진다 저널 4 저널 나머지는 읽지 않음 커밋 블록이 있는 트랜잭션만 다시 씀 — 저널 크기에 비례 CoW 6 뿌리 포인터 하나 — 옛 트리 또는 새 트리 가운데 하나가 통째로 유효 뿌리를 바꾸기 전에 멈추면 옛 트리, 바꾼 뒤면 새 트리 번호 = 동작 목록 단계 · 분산 파일 시스템의 메타데이터 서버도 둘째 줄 방식(EditLog · MDS 저널)으로 재시작한다

그림 5 · 충돌 뒤 다시 읽는 범위가 제자리 덮어쓰기는 볼륨 전체, 저널은 커밋된 기록, CoW 는 마지막 뿌리 하나로 줄어든다.

🔑 fsck 는 «어긋난 뒤 찾아서» 고치고, 저널과 CoW 는 «어긋날 수 없는 순서»로 쓴다 — 그래서 복구 비용이 볼륨 크기가 아니라 저널 크기 또는 포인터 하나로 줄어든다.

6비교 — 관련 기술과의 경계

기술맡는 일파일 시스템과의 경계넘기는 곳
운영체제 입출력 구조시스템 호출 · 페이지 캐시 · DMA 경로write() 가 페이지 캐시에 넣기까지는 그쪽, 블록을 어떤 순서로 쓰는가부터 이쪽복사 횟수 · 대기 방식
스토리지 아키텍처DAS · NAS · SAN · RAID 로 블록을 내줌이쪽은 받은 블록 위에 이름 · 메타데이터를 얹음 — NAS 는 파일 시스템을 장치 쪽에 둠디스크 고장 · 배열 재구성
데이터 백업 · 복구시점별 사본을 다른 위치에 보관이쪽의 스냅숏은 같은 장치 안 사본이라 장치를 잃으면 함께 잃음실수 삭제 · 랜섬웨어 · 재해
보조 기억 장치HDD · SSD 매체의 기록 방식이쪽은 블록 번호만 보고 매체 안 배치는 모름매체 수명 · 지연

분석「파일이 깨졌다」는 질문은 메타데이터 일관성이면 파일 시스템, 장치를 잃었으면 스토리지 아키텍처, 지운 파일을 되돌려야 하면 데이터 백업 · 복구로 보낸다. 근거는 표의 「경계」 열 — CoW 스냅숏도 같은 풀 안에 있어 장치 고장에는 사본이 되지 못한다(OpenZFS 체크섬 문서 · 자동 복구는 RAID · copies 사본이 있을 때만).

7실무 진단 — 충돌 · 손상 · 공간 문제의 위치 가르기

분석마운트 시간 → fsync 호출 → 체크섬 오류 → 사본 수 순서로 본다. 앞의 둘은 메타데이터 방식과 응용 코드에서, 뒤의 둘은 매체 · 노드에서 생기므로 고칠 주체가 다르다(tune2fs(8) · fsync(2)).

#증상의심 원인위치확인 명령판정 기준(근거)
1재부팅 뒤 마운트 전 검사가 오래 걸림저널 없음메타데이터 일관성tune2fs -l /dev/sdb1features 에 has_journal 이 없음(tune2fs(8))
2전원 장애 뒤 마지막 기록이 사라짐응용이 fsync 를 부르지 않음응용 ↔ 페이지 캐시strace -e trace=fsync,fdatasync -p <PID>쓰기 뒤 fsync 줄이 없음(fsync(2))
3장치 오류는 없는데 내용이 다름조용한 비트 손상데이터 블록zpool status -v데이터 오류가 있는 파일 목록이 나옴(zpool-status.8)
4공간은 남는데 새 파일을 못 만듦inode 고갈메타데이터df -iIUse% 100%(df(1))
5분산 저장소 읽기 실패 · 지연사본 수 부족 · 빠진 블록데이터 노드hdfs fsck /missing · under-replicated 블록 보고 · 이 명령은 고치지 않음(HDFS Users Guide)

ext4 는 저널이 있어도 data=writeback 이면 데이터 순서를 지키지 않으므로(커널 ext4 관리 문서), 둘째 행에서 fsync 가 있는데도 내용이 깨지면 마운트 옵션의 data= 값을 함께 본다.

8시험 대비

출제 정보 정보관리(116회, 65회) · 컴퓨터시스템응용(111회, 89회, 75회)문제 원문 — 큐넷 자료실 「기출문제(기술사)」 www.q-net.or.kr

시험에서는 파일 시스템을 메타데이터 · 데이터 블록 · 갱신 방식으로 그리게 하는 구조 · 구성형, 저널링 · CoW · 분산 파일 시스템을 견주는 비교형으로 나올 수 있다. 구조형이면 그림 3 지도에 세 토픽을 얹고, 비교형이면 «무엇을 먼저 쓰는가 · 복구 때 읽는 범위 · 사본 위치» 세 기준으로 표를 세운다.

답안 목차
  1. 개요 — 정의(블록 위의 이름 · 메타데이터) · VFS 객체 넷(superblock · inode · dentry · file)
  2. 구조 — 그림 3 지도(메타데이터 · 데이터 블록 · 장치 한 대 ↔ 여러 노드) + 세 토픽 표
  3. 일관성 문제 — 덧붙이기 블록 셋(Db · I · B) · 충돌 여섯 경우(OSTEP 42.1)
  4. 갱신 방식 비교 — 그림 4 쓰기 양(3 · 7 · 4 · 3벌) + 그림 5 복구 범위(볼륨 · 저널 · 뿌리)
  5. 분산 — 메타데이터 서버 · 데이터 노드 분리 · HDFS 128 MB · 사본 3 · EditLog
  6. 동향 — CoW 체크섬 · 스냅숏 · 응용의 fsync 책임

꼭 쓸 키워드
inode비트맵VFSfsck저널data=ordered체크포인트CoW스냅숏네임노드

다른 답안과 차이를 내는 한 가지는 같은 4 KiB 덧붙이기를 네 방식의 «블록 쓰기 횟수»와 «복구 때 읽는 범위» 두 숫자로 견주는 것이다.

9오해와 사실

  • 오해저널링 파일 시스템이면 정전에도 데이터를 잃지 않는다.
    사실저널이 지키는 것은 메타데이터의 일관성이고, 커밋 전 몇 초(ext4 commit 기본 5초)의 쓰기는 잃을 수 있다(커널 ext4 관리 문서) — 잃으면 안 되는 쓰기는 응용이 fsync 로 확정한다.
  • 오해write() 가 성공하면 디스크에 기록된 것이다.
    사실write() 는 페이지 캐시에 넣고 돌아오며, 장치까지 보내는 것은 fsync() 이고 새 파일의 디렉터리 항목은 디렉터리 fsync 가 따로 필요하다(fsync(2)).
  • 오해CoW 스냅숏이 있으면 백업은 필요 없다.
    사실스냅숏은 같은 풀의 블록을 나눠 쓰므로 풀을 이루는 장치를 잃으면 함께 사라진다 — 다른 위치의 사본은 데이터 백업 · 복구가 다룬다(Btrfs 문서 · 복사 없는 스냅숏).

10핵심 정리

방식먼저 쓰는 것충돌 뒤 복구4 KiB 덧붙이기 쓰기추가로 얻는 것대표 구현
제자리 + fsck순서 없음볼륨 전체 검사3번없음ext2
순서 저널데이터 → 저널 → 커밋커밋된 트랜잭션만 다시 씀7번빠른 재시작ext4 data=ordered
전체 저널데이터까지 저널에커밋된 트랜잭션만 다시 씀8번데이터 순서 보장ext4 data=journal
CoW새 위치 → 뿌리 교체마지막 뿌리 사용새 블록 4개체크섬 · 스냅숏ZFS · Btrfs
분산사본 파이프라인 · EditLog메타데이터 서버 저널 재생3벌 + 기록노드 고장 견딤 · 확장HDFS · CephFS
VFS(구현에 맡김)(구현에 맡김)—여러 구현 공존리눅스 커널

11참고 문헌

  1. 먼저 볼 문헌
  2. ★ Operating Systems: Three Easy Pieces - Chapter 42 Crash Consistency: FSCK and Journaling (Version 1.10) — 덧붙이기 한 건이 블록 셋을 바꾸고 충돌이 여섯 가지 불일치를 남기는 까닭과 fsck · 저널 · CoW 의 차이를 볼 때
    R. H. Arpaci-Dusseau · A. C. Arpaci-Dusseau (University of Wisconsin-Madison) · 2026-11 · pages.cs.wisc.edu/~remzi/OSTEP/file-journaling.pdf · 확인 2026-11-14
  3. ★ ext4 General Information - Mount options — data=ordered · journal · writeback 세 모드와 commit 5초 기본값을 볼 때
    Linux kernel documentation · 2026-11 · docs.kernel.org/admin-guide/ext4.html · 확인 2026-11-14
  4. ★ HDFS Architecture (Apache Hadoop 3.3.5) — 네임노드 · 데이터노드 분리 · EditLog · 파이프라인 복제를 볼 때
    Apache Software Foundation · 2026-11 · hadoop.apache.org/docs/stable/hadoop-project-dist/hadoop-hdfs/HdfsDesign.html · 확인 2026-11-14
  5. ★ BTRFS documentation - Introduction — CoW · 데이터 · 메타데이터 체크섬 · 스냅숏을 볼 때
    BTRFS project · 2026-11 · btrfs.readthedocs.io/en/latest/Introduction.html · 확인 2026-11-14
  6. 본문 근거
  7. Overview of the Linux Virtual File System — Linux kernel documentation · 2026-11 · docs.kernel.org/filesystems/vfs.html · 확인 2026-11-14
  8. hdfs-default.xml (Apache Hadoop 3.3.5) — Apache Software Foundation · 2026-11 · hadoop.apache.org/docs/stable/hadoop-project-dist/hadoop-hdfs/hdfs-default.xml · 확인 2026-11-14
  9. HDFS Users Guide - fsck — Apache Software Foundation · 2026-11 · hadoop.apache.org/docs/stable/hadoop-project-dist/hadoop-hdfs/HdfsUserGuide.html · 확인 2026-11-14
  10. Ceph File System (CephFS) — Ceph project · 2026-11 · docs.ceph.com/en/latest/cephfs/ · 확인 2026-11-14
  11. OpenZFS documentation - Checksums — OpenZFS project · 2026-11 · openzfs.github.io/openzfs-docs/Basic%20Concepts/Data%20Storage/Checksums.html · 확인 2026-11-14
  12. zpool-status.8 (OpenZFS) — OpenZFS project · 2026-11 · openzfs.github.io/openzfs-docs/man/master/8/zpool-status.8.html · 확인 2026-11-14
  13. The Google File System - SOSP 2003 — S. Ghemawat · H. Gobioff · S.-T. Leung (Google) · 2003-10 · research.google/pubs/the-google-file-system/ · 확인 2026-11-14
  14. fsync(2) Linux manual page — man7.org · 2026-11 · man7.org/linux/man-pages/man2/fsync.2.html · 확인 2026-11-14
  15. tune2fs(8) Linux manual page — e2fsprogs · man7.org · 2026-11 · man7.org/linux/man-pages/man8/tune2fs.8.html · 확인 2026-11-14
  16. df(1) Linux manual page — GNU coreutils · man7.org · 2026-11 · man7.org/linux/man-pages/man1/df.1.html · 확인 2026-11-14