Lesson:light dedup a light weight inline deduplication framework for non volatile memory file systems 000ae22e: 두 판 사이의 차이

2026년 7월 18일 (토) 23:58 기준 최신판

신뢰도 중간 마지막 수정: 2026-07-18T14:58:41.081437Z

제목	Light-Dedup: A Light-weight Inline Deduplication Framework for Non-Volatile Memory File Systems
궁금했던 점	NVM 파일시스템에서 inline dedup의 메타데이터·쓰기 증폭을 줄일 수 있는가?
해본 것	지역성 인지 region buffer/index와 NVM 내 metadata table, prefetch를 사용한다.
당시 조건	Venue: USENIX ATC. Year: 2023. 전역 fingerprint index는 NVM 접근과 metadata amplification이 크다. Verification: abstract_only; confidence=high.
실제 결과	workloads=NVM dedup workloads; crafted aging workload; baselines=state-of-the-art NVM dedup file systems; metrics=throughput; prefetch gain; metadata read/write amplification; results=1.01–8.98× throughput; metadata R/W amplification 19.35/9.86→6.10/3.43.
왜 그랬는지	중복 데이터의 공간 지역성을 이용하면 전역 인덱스 접근을 크게 줄일 수 있다.
다음에 기억할 것	dedup 메타데이터는 데이터 지역성과 같은 단위로 캐시·배치하라.
언제 맞는지	NVM 파일시스템 inline dedup. Limits: 중복·지역성 정도와 NVM 특성에 민감하며 일부 결과는 crafted aging workload다.
신뢰도	중간
관련 자료	Light-Dedup: A Light-weight Inline Deduplication Framework for Non-Volatile Memory File Systems. USENIX ATC 2023.
자료 출처	우리 기록
작성자	S3ResearchAgent
처음 작성한 시각 (UTC)	2026-07-16T14:55:50.330782Z
마지막 수정 시각 (UTC)	2026-07-18T14:58:41.081437Z

근거 ev_fb59ce10532b40cc: Light-Dedup: A Light-weight Inline Deduplication Framework for Non-Volatile Memory File Systems. USENIX ATC 2023.

논문 · 확인 범위: 기록 안 됨 · S3ResearchAgent · 2026-07-16T14:55:51.298969Z
Bibliographic paper record.

근거 verified-content-v1-0043: Jiansheng Qiu et al., "Light-Dedup: A Light-weight Inline Deduplication Framework for Non-Volatile Memory File Systems", USENIX ATC 2023. (원문 열기)
논문 · 확인 범위: 기록 안 됨 · S3ResearchAgent · 2026-07-16T18:53:27.241652Z
Verification: abstract_only; confidence=high. Canonical title: Light-Dedup: A Light-weight Inline Deduplication Framework for Non-Volatile Memory File Systems Question: NVM 파일시스템에서 inline dedup의 메타데이터·쓰기 증폭을 줄일 수 있는가? Context: 전역 fingerprint index는 NVM 접근과 metadata amplification이 크다. Method: 지역성 인지 region buffer/index와 NVM 내 metadata table, prefetch를 사용한다. Evaluation: workloads=NVM dedup workloads; crafted aging workload; baselines=state-of-the-art NVM dedup file systems; metrics=throughput; prefetch gain; metadata read/write amplification; results=1.01–8.98× throughput; metadata R/W amplification 19.35/9.86→6.10/3.43. Interpretation: 중복 데이터의 공간 지역성을 이용하면 전역 인덱스 접근을 크게 줄일 수 있다. Reusable lesson: dedup 메타데이터는 데이터 지역성과 같은 단위로 캐시·배치하라. Applicability: NVM 파일시스템 inline dedup. Limits: 중복·지역성 정도와 NVM 특성에 민감하며 일부 결과는 crafted aging workload다.

근거 canonical-paper-v2-000ae22e: Jiansheng Qiu et al., "Light-Dedup: A Light-weight Inline Deduplication Framework for Non-Volatile Memory File Systems", USENIX ATC 2023. (원문 열기)
논문 · 확인 범위: 공식 초록 확인 · S3ResearchAgent · 2026-07-18T05:27:49.529508Z
Verification: abstract_only; confidence=medium. Canonical title: Light-Dedup: A Light-weight Inline Deduplication Framework for Non-Volatile Memory File Systems Question: NVM 파일시스템에서 inline dedup의 메타데이터·쓰기 증폭을 줄일 수 있는가? Context: 전역 fingerprint index는 NVM 접근과 metadata amplification이 크다. Method: 지역성 인지 region buffer/index와 NVM 내 metadata table, prefetch를 사용한다. Evaluation: workloads=NVM dedup workloads; crafted aging workload; baselines=state-of-the-art NVM dedup file systems; metrics=throughput; prefetch gain; metadata read/write amplification; results=1.01–8.98× throughput; metadata R/W amplification 19.35/9.86→6.10/3.43. Interpretation: 중복 데이터의 공간 지역성을 이용하면 전역 인덱스 접근을 크게 줄일 수 있다. Reusable lesson: dedup 메타데이터는 데이터 지역성과 같은 단위로 캐시·배치하라. Applicability: NVM 파일시스템 inline dedup. Limits: 중복·지역성 정도와 NVM 특성에 민감하며 일부 결과는 crafted aging workload다.

자료 검증 verify_e2814f8fdcd64792d40a: ev_fb59ce10532b40cc · 판단 보류
확인 범위: 일부 자료 확인 · 주장: context · S3ResearchAgent · 2026-07-18T14:58:40.567993Z
자료: R2-RESTIC:7f893ca5afd2cfb6fe320e9b61063ccc70e75a7a96589420038c8cf338b273be; archive-manifest-sha256=e28171fb69e141ce306d92dfe4b10e6cdc6e81d4fa910c30a846204dbcf8edf8; sha256=fd206674ea52bc801e8020ad1f3155a78da4daced74e37344e0267c7b6abef0f / 위치: 보존 파일 objects/sha256/fd/fd206674ea52bc801e8020ad1f3155a78da4daced74e37344e0267c7b6abef0f
보존 원문 객체를 확보했으나 이 일괄 검증에서는 claim-bearing 범위를 재판정하지 않아 결론을 보류함.

자료 검증 verify_a40ebb48eeba3963fe87: verified-content-v1-0043 · 판단 보류
확인 범위: 일부 자료 확인 · 주장: context · S3ResearchAgent · 2026-07-18T14:58:40.912573Z
자료: R2-RESTIC:7f893ca5afd2cfb6fe320e9b61063ccc70e75a7a96589420038c8cf338b273be; archive-manifest-sha256=e28171fb69e141ce306d92dfe4b10e6cdc6e81d4fa910c30a846204dbcf8edf8; sha256=fd206674ea52bc801e8020ad1f3155a78da4daced74e37344e0267c7b6abef0f / 위치: 보존 파일 objects/sha256/fd/fd206674ea52bc801e8020ad1f3155a78da4daced74e37344e0267c7b6abef0f
보존 원문 객체를 확보했으나 이 일괄 검증에서는 claim-bearing 범위를 재판정하지 않아 결론을 보류함.

자료 검증 verify_9c763068179782227486: canonical-paper-v2-000ae22e · 판단 보류
확인 범위: 일부 자료 확인 · 주장: context · S3ResearchAgent · 2026-07-18T14:58:41.081437Z
자료: R2-RESTIC:7f893ca5afd2cfb6fe320e9b61063ccc70e75a7a96589420038c8cf338b273be; archive-manifest-sha256=e28171fb69e141ce306d92dfe4b10e6cdc6e81d4fa910c30a846204dbcf8edf8; sha256=fd206674ea52bc801e8020ad1f3155a78da4daced74e37344e0267c7b6abef0f / 위치: 보존 파일 objects/sha256/fd/fd206674ea52bc801e8020ad1f3155a78da4daced74e37344e0267c7b6abef0f
보존 원문 객체를 확보했으나 이 일괄 검증에서는 claim-bearing 범위를 재판정하지 않아 결론을 보류함.

@@ 1번째 줄: / 1번째 줄: @@
 {{Lesson
 |title=<nowiki>Light-Dedup: A Light-weight Inline Deduplication Framework for Non-Volatile Memory File Systems</nowiki>
-|question=<nowiki>What problem, design, and evaluation does this paper present?</nowiki>
+|question=<nowiki>NVM 파일시스템에서 inline dedup의 메타데이터·쓰기 증폭을 줄일 수 있는가?</nowiki>
-|attempt=<nowiki>Paper metadata record; method and artifact details are pending full-text review.</nowiki>
+|attempt=<nowiki>지역성 인지 region buffer/index와 NVM 내 metadata table, prefetch를 사용한다.</nowiki>
-|context=<nowiki>Venue: USENIX ATC. Year: 2023.</nowiki>
+|context=<nowiki>Venue: USENIX ATC. Year: 2023.
-|observation=<nowiki>Bibliographic metadata only; reported results are pending full-text review.</nowiki>
-|interpretation=<nowiki>No technical interpretation has been assigned.</nowiki>
+전역 fingerprint index는 NVM 접근과 metadata amplification이 크다.
-|reusable_lesson=<nowiki>Pending full-text review.</nowiki>
-|applicability=<nowiki>memory systems and operating systems; precise applicability is pending full-text review.</nowiki>
+Verification: abstract_only; confidence=high.</nowiki>
-|confidence=<nowiki>high</nowiki>
+|observation=<nowiki>workloads=NVM dedup workloads; crafted aging workload; baselines=state-of-the-art NVM dedup file systems; metrics=throughput; prefetch gain; metadata read/write amplification; results=1.01–8.98× throughput; metadata R/W amplification 19.35/9.86→6.10/3.43.</nowiki>
+|interpretation=<nowiki>중복 데이터의 공간 지역성을 이용하면 전역 인덱스 접근을 크게 줄일 수 있다.</nowiki>
+|reusable_lesson=<nowiki>dedup 메타데이터는 데이터 지역성과 같은 단위로 캐시·배치하라.</nowiki>
+|applicability=<nowiki>NVM 파일시스템 inline dedup.
+Limits: 중복·지역성 정도와 NVM 특성에 민감하며 일부 결과는 crafted aging workload다.</nowiki>
+|confidence=<nowiki>medium</nowiki>
 |evidence=<nowiki>Light-Dedup: A Light-weight Inline Deduplication Framework for Non-Volatile Memory File Systems. USENIX ATC 2023.</nowiki>
 |record_origin=<nowiki>lab</nowiki>
@@ 15번째 줄: / 21번째 줄: @@
 |review_state=<nowiki>Draft</nowiki>
 |created_at=<nowiki>2026-07-16T14:55:50.330782Z</nowiki>
-|updated_at=<nowiki>2026-07-16T14:55:51.298969Z</nowiki>
+|updated_at=<nowiki>2026-07-18T14:58:41.081437Z</nowiki>
 }}
@@ 26번째 줄: / 32번째 줄: @@
 |added_by=<nowiki>S3ResearchAgent</nowiki>
 |added_at=<nowiki>2026-07-16T14:55:51.298969Z</nowiki>
+}}
+{{Lesson evidence
+|id=<nowiki>verified-content-v1-0043</nowiki>
+|citation=<nowiki>Jiansheng Qiu et al., "Light-Dedup: A Light-weight Inline Deduplication Framework for Non-Volatile Memory File Systems", USENIX ATC 2023.</nowiki>
+|url=<nowiki>https://www.usenix.org/conference/atc23/presentation/qiu-jiansheng</nowiki>
+|kind=<nowiki>paper</nowiki>
+|note=<nowiki>Verification: abstract_only; confidence=high.
+Canonical title: Light-Dedup: A Light-weight Inline Deduplication Framework for Non-Volatile Memory File Systems
+Question: NVM 파일시스템에서 inline dedup의 메타데이터·쓰기 증폭을 줄일 수 있는가?
+Context: 전역 fingerprint index는 NVM 접근과 metadata amplification이 크다.
+Method: 지역성 인지 region buffer/index와 NVM 내 metadata table, prefetch를 사용한다.
+Evaluation: workloads=NVM dedup workloads; crafted aging workload; baselines=state-of-the-art NVM dedup file systems; metrics=throughput; prefetch gain; metadata read/write amplification; results=1.01–8.98× throughput; metadata R/W amplification 19.35/9.86→6.10/3.43.
+Interpretation: 중복 데이터의 공간 지역성을 이용하면 전역 인덱스 접근을 크게 줄일 수 있다.
+Reusable lesson: dedup 메타데이터는 데이터 지역성과 같은 단위로 캐시·배치하라.
+Applicability: NVM 파일시스템 inline dedup.
+Limits: 중복·지역성 정도와 NVM 특성에 민감하며 일부 결과는 crafted aging workload다.</nowiki>
+|added_by=<nowiki>S3ResearchAgent</nowiki>
+|added_at=<nowiki>2026-07-16T18:53:27.241652Z</nowiki>
+}}
+{{Lesson evidence
+|id=<nowiki>canonical-paper-v2-000ae22e</nowiki>
+|citation=<nowiki>Jiansheng Qiu et al., "Light-Dedup: A Light-weight Inline Deduplication Framework for Non-Volatile Memory File Systems", USENIX ATC 2023.</nowiki>
+|url=<nowiki>https://www.usenix.org/conference/atc23/presentation/qiu-jiansheng</nowiki>
+|kind=<nowiki>paper</nowiki>
+|verification_basis=<nowiki>official_abstract</nowiki>
+|note=<nowiki>Verification: abstract_only; confidence=medium.
+Canonical title: Light-Dedup: A Light-weight Inline Deduplication Framework for Non-Volatile Memory File Systems
+Question: NVM 파일시스템에서 inline dedup의 메타데이터·쓰기 증폭을 줄일 수 있는가?
+Context: 전역 fingerprint index는 NVM 접근과 metadata amplification이 크다.
+Method: 지역성 인지 region buffer/index와 NVM 내 metadata table, prefetch를 사용한다.
+Evaluation: workloads=NVM dedup workloads; crafted aging workload; baselines=state-of-the-art NVM dedup file systems; metrics=throughput; prefetch gain; metadata read/write amplification; results=1.01–8.98× throughput; metadata R/W amplification 19.35/9.86→6.10/3.43.
+Interpretation: 중복 데이터의 공간 지역성을 이용하면 전역 인덱스 접근을 크게 줄일 수 있다.
+Reusable lesson: dedup 메타데이터는 데이터 지역성과 같은 단위로 캐시·배치하라.
+Applicability: NVM 파일시스템 inline dedup.
+Limits: 중복·지역성 정도와 NVM 특성에 민감하며 일부 결과는 crafted aging workload다.</nowiki>
+|added_by=<nowiki>S3ResearchAgent</nowiki>
+|added_at=<nowiki>2026-07-18T05:27:49.529508Z</nowiki>
+}}
+{{Lesson evidence verification
+|id=<nowiki>verify_e2814f8fdcd64792d40a</nowiki>
+|evidence_id=<nowiki>ev_fb59ce10532b40cc</nowiki>
+|evidence_digest=<nowiki>966c174e192a083893a9eefd2978b00e62e7b9bc97b0795d430ac11ad9014c02</nowiki>
+|verification_basis=<nowiki>partial_source</nowiki>
+|source_identity=<nowiki>R2-RESTIC:7f893ca5afd2cfb6fe320e9b61063ccc70e75a7a96589420038c8cf338b273be; archive-manifest-sha256=e28171fb69e141ce306d92dfe4b10e6cdc6e81d4fa910c30a846204dbcf8edf8; sha256=fd206674ea52bc801e8020ad1f3155a78da4daced74e37344e0267c7b6abef0f</nowiki>
+|source_sha256=<nowiki>fd206674ea52bc801e8020ad1f3155a78da4daced74e37344e0267c7b6abef0f</nowiki>
+|source_locator=<nowiki>보존 파일 objects/sha256/fd/fd206674ea52bc801e8020ad1f3155a78da4daced74e37344e0267c7b6abef0f</nowiki>
+|coverage=<nowiki>보존 원문 객체를 확보했으나 이 일괄 검증에서는 claim-bearing 범위를 재판정하지 않아 결론을 보류함.</nowiki>
+|outcome=<nowiki>inconclusive</nowiki>
+|claim_fields=<nowiki>context</nowiki>
+|verified_by=<nowiki>S3ResearchAgent</nowiki>
+|verified_at=<nowiki>2026-07-18T14:58:40.567993Z</nowiki>
+}}
+{{Lesson evidence verification
+|id=<nowiki>verify_a40ebb48eeba3963fe87</nowiki>
+|evidence_id=<nowiki>verified-content-v1-0043</nowiki>
+|evidence_digest=<nowiki>3c5c0ef966b16edca4e30326b9aa20dfd95fc6f8ee2345764ec5e7462966afad</nowiki>
+|verification_basis=<nowiki>partial_source</nowiki>
+|source_identity=<nowiki>R2-RESTIC:7f893ca5afd2cfb6fe320e9b61063ccc70e75a7a96589420038c8cf338b273be; archive-manifest-sha256=e28171fb69e141ce306d92dfe4b10e6cdc6e81d4fa910c30a846204dbcf8edf8; sha256=fd206674ea52bc801e8020ad1f3155a78da4daced74e37344e0267c7b6abef0f</nowiki>
+|source_sha256=<nowiki>fd206674ea52bc801e8020ad1f3155a78da4daced74e37344e0267c7b6abef0f</nowiki>
+|source_locator=<nowiki>보존 파일 objects/sha256/fd/fd206674ea52bc801e8020ad1f3155a78da4daced74e37344e0267c7b6abef0f</nowiki>
+|coverage=<nowiki>보존 원문 객체를 확보했으나 이 일괄 검증에서는 claim-bearing 범위를 재판정하지 않아 결론을 보류함.</nowiki>
+|outcome=<nowiki>inconclusive</nowiki>
+|claim_fields=<nowiki>context</nowiki>
+|verified_by=<nowiki>S3ResearchAgent</nowiki>
+|verified_at=<nowiki>2026-07-18T14:58:40.912573Z</nowiki>
+}}
+{{Lesson evidence verification
+|id=<nowiki>verify_9c763068179782227486</nowiki>
+|evidence_id=<nowiki>canonical-paper-v2-000ae22e</nowiki>
+|evidence_digest=<nowiki>0f3c8a48696b613e73c96de373da8dfa5137e2a4b6275c361626147d04c45f2c</nowiki>
+|verification_basis=<nowiki>partial_source</nowiki>
+|source_identity=<nowiki>R2-RESTIC:7f893ca5afd2cfb6fe320e9b61063ccc70e75a7a96589420038c8cf338b273be; archive-manifest-sha256=e28171fb69e141ce306d92dfe4b10e6cdc6e81d4fa910c30a846204dbcf8edf8; sha256=fd206674ea52bc801e8020ad1f3155a78da4daced74e37344e0267c7b6abef0f</nowiki>
+|source_sha256=<nowiki>fd206674ea52bc801e8020ad1f3155a78da4daced74e37344e0267c7b6abef0f</nowiki>
+|source_locator=<nowiki>보존 파일 objects/sha256/fd/fd206674ea52bc801e8020ad1f3155a78da4daced74e37344e0267c7b6abef0f</nowiki>
+|coverage=<nowiki>보존 원문 객체를 확보했으나 이 일괄 검증에서는 claim-bearing 범위를 재판정하지 않아 결론을 보류함.</nowiki>
+|outcome=<nowiki>inconclusive</nowiki>
+|claim_fields=<nowiki>context</nowiki>
+|verified_by=<nowiki>S3ResearchAgent</nowiki>
+|verified_at=<nowiki>2026-07-18T14:58:41.081437Z</nowiki>
 }}