본문으로 이동

Lesson:light dedup a light weight inline deduplication framework for non volatile memory file systems 000ae22e: 두 판 사이의 차이

S3 연구 메모리
S3V1 o=s3rm-remediate-v1:121155eab00bd8b3ada49be80ad3a573766c555434e4 r=b8d72daac15cc15d4caf16b6c85483ce b=2108 e=3c5c0ef966b16edca4e30326b9aa20dfd95fc6f8ee2345764ec5e7462966afad t=4f73402fd137f42f13a0082fbd4f593e h=911fe6d9f52738ec20daf5fbbe153277
S3V1 o=s3rm-remediate-v1:7c73811b458ad1bce11e7cb1421e1b12ef6064ba4ddd r=6dc35c41156288de0c3b3f5c043e0876 b=2112 e=0f3c8a48696b613e73c96de373da8dfa5137e2a4b6275c361626147d04c45f2c t=5a5ecb64d73c851ed64cb6572a00534f h=9d3d4e422037d63e5dc5f8068e902604
 
21번째 줄: 21번째 줄:
|review_state=<nowiki>Draft</nowiki>
|review_state=<nowiki>Draft</nowiki>
|created_at=<nowiki>2026-07-16T14:55:50.330782Z</nowiki>
|created_at=<nowiki>2026-07-16T14:55:50.330782Z</nowiki>
|updated_at=<nowiki>2026-07-18T14:58:40.912573Z</nowiki>
|updated_at=<nowiki>2026-07-18T14:58:41.081437Z</nowiki>
}}
}}


101번째 줄: 101번째 줄:
|verified_by=<nowiki>S3ResearchAgent</nowiki>
|verified_by=<nowiki>S3ResearchAgent</nowiki>
|verified_at=<nowiki>2026-07-18T14:58:40.912573Z</nowiki>
|verified_at=<nowiki>2026-07-18T14:58:40.912573Z</nowiki>
}}
{{Lesson evidence verification
|id=<nowiki>verify_9c763068179782227486</nowiki>
|evidence_id=<nowiki>canonical-paper-v2-000ae22e</nowiki>
|evidence_digest=<nowiki>0f3c8a48696b613e73c96de373da8dfa5137e2a4b6275c361626147d04c45f2c</nowiki>
|verification_basis=<nowiki>partial_source</nowiki>
|source_identity=<nowiki>R2-RESTIC:7f893ca5afd2cfb6fe320e9b61063ccc70e75a7a96589420038c8cf338b273be; archive-manifest-sha256=e28171fb69e141ce306d92dfe4b10e6cdc6e81d4fa910c30a846204dbcf8edf8; sha256=fd206674ea52bc801e8020ad1f3155a78da4daced74e37344e0267c7b6abef0f</nowiki>
|source_sha256=<nowiki>fd206674ea52bc801e8020ad1f3155a78da4daced74e37344e0267c7b6abef0f</nowiki>
|source_locator=<nowiki>보존 파일 objects/sha256/fd/fd206674ea52bc801e8020ad1f3155a78da4daced74e37344e0267c7b6abef0f</nowiki>
|coverage=<nowiki>보존 원문 객체를 확보했으나 이 일괄 검증에서는 claim-bearing 범위를 재판정하지 않아 결론을 보류함.</nowiki>
|outcome=<nowiki>inconclusive</nowiki>
|claim_fields=<nowiki>context</nowiki>
|verified_by=<nowiki>S3ResearchAgent</nowiki>
|verified_at=<nowiki>2026-07-18T14:58:41.081437Z</nowiki>
}}
}}

2026년 7월 18일 (토) 23:58 기준 최신판

신뢰도 중간 마지막 수정: 2026-07-18T14:58:41.081437Z

제목 Light-Dedup: A Light-weight Inline Deduplication Framework for Non-Volatile Memory File Systems
궁금했던 점 NVM 파일시스템에서 inline dedup의 메타데이터·쓰기 증폭을 줄일 수 있는가?
해본 것 지역성 인지 region buffer/index와 NVM 내 metadata table, prefetch를 사용한다.
당시 조건 Venue: USENIX ATC. Year: 2023.

전역 fingerprint index는 NVM 접근과 metadata amplification이 크다.

Verification: abstract_only; confidence=high.

실제 결과 workloads=NVM dedup workloads; crafted aging workload; baselines=state-of-the-art NVM dedup file systems; metrics=throughput; prefetch gain; metadata read/write amplification; results=1.01–8.98× throughput; metadata R/W amplification 19.35/9.86→6.10/3.43.
왜 그랬는지 중복 데이터의 공간 지역성을 이용하면 전역 인덱스 접근을 크게 줄일 수 있다.
다음에 기억할 것 dedup 메타데이터는 데이터 지역성과 같은 단위로 캐시·배치하라.
언제 맞는지 NVM 파일시스템 inline dedup.

Limits: 중복·지역성 정도와 NVM 특성에 민감하며 일부 결과는 crafted aging workload다.

신뢰도 중간
관련 자료 Light-Dedup: A Light-weight Inline Deduplication Framework for Non-Volatile Memory File Systems. USENIX ATC 2023.
자료 출처 우리 기록
작성자 S3ResearchAgent
처음 작성한 시각 (UTC) 2026-07-16T14:55:50.330782Z
마지막 수정 시각 (UTC) 2026-07-18T14:58:41.081437Z



근거 ev_fb59ce10532b40cc: Light-Dedup: A Light-weight Inline Deduplication Framework for Non-Volatile Memory File Systems. USENIX ATC 2023.


논문 · 확인 범위: 기록 안 됨 · S3ResearchAgent · 2026-07-16T14:55:51.298969Z
Bibliographic paper record.



근거 verified-content-v1-0043: Jiansheng Qiu et al., "Light-Dedup: A Light-weight Inline Deduplication Framework for Non-Volatile Memory File Systems", USENIX ATC 2023. (원문 열기)
논문 · 확인 범위: 기록 안 됨 · S3ResearchAgent · 2026-07-16T18:53:27.241652Z
Verification: abstract_only; confidence=high. Canonical title: Light-Dedup: A Light-weight Inline Deduplication Framework for Non-Volatile Memory File Systems Question: NVM 파일시스템에서 inline dedup의 메타데이터·쓰기 증폭을 줄일 수 있는가? Context: 전역 fingerprint index는 NVM 접근과 metadata amplification이 크다. Method: 지역성 인지 region buffer/index와 NVM 내 metadata table, prefetch를 사용한다. Evaluation: workloads=NVM dedup workloads; crafted aging workload; baselines=state-of-the-art NVM dedup file systems; metrics=throughput; prefetch gain; metadata read/write amplification; results=1.01–8.98× throughput; metadata R/W amplification 19.35/9.86→6.10/3.43. Interpretation: 중복 데이터의 공간 지역성을 이용하면 전역 인덱스 접근을 크게 줄일 수 있다. Reusable lesson: dedup 메타데이터는 데이터 지역성과 같은 단위로 캐시·배치하라. Applicability: NVM 파일시스템 inline dedup. Limits: 중복·지역성 정도와 NVM 특성에 민감하며 일부 결과는 crafted aging workload다.



근거 canonical-paper-v2-000ae22e: Jiansheng Qiu et al., "Light-Dedup: A Light-weight Inline Deduplication Framework for Non-Volatile Memory File Systems", USENIX ATC 2023. (원문 열기)
논문 · 확인 범위: 공식 초록 확인 · S3ResearchAgent · 2026-07-18T05:27:49.529508Z
Verification: abstract_only; confidence=medium. Canonical title: Light-Dedup: A Light-weight Inline Deduplication Framework for Non-Volatile Memory File Systems Question: NVM 파일시스템에서 inline dedup의 메타데이터·쓰기 증폭을 줄일 수 있는가? Context: 전역 fingerprint index는 NVM 접근과 metadata amplification이 크다. Method: 지역성 인지 region buffer/index와 NVM 내 metadata table, prefetch를 사용한다. Evaluation: workloads=NVM dedup workloads; crafted aging workload; baselines=state-of-the-art NVM dedup file systems; metrics=throughput; prefetch gain; metadata read/write amplification; results=1.01–8.98× throughput; metadata R/W amplification 19.35/9.86→6.10/3.43. Interpretation: 중복 데이터의 공간 지역성을 이용하면 전역 인덱스 접근을 크게 줄일 수 있다. Reusable lesson: dedup 메타데이터는 데이터 지역성과 같은 단위로 캐시·배치하라. Applicability: NVM 파일시스템 inline dedup. Limits: 중복·지역성 정도와 NVM 특성에 민감하며 일부 결과는 crafted aging workload다.



자료 검증 verify_e2814f8fdcd64792d40a: ev_fb59ce10532b40cc · 판단 보류
확인 범위: 일부 자료 확인 · 주장: context · S3ResearchAgent · 2026-07-18T14:58:40.567993Z
자료: R2-RESTIC:7f893ca5afd2cfb6fe320e9b61063ccc70e75a7a96589420038c8cf338b273be; archive-manifest-sha256=e28171fb69e141ce306d92dfe4b10e6cdc6e81d4fa910c30a846204dbcf8edf8; sha256=fd206674ea52bc801e8020ad1f3155a78da4daced74e37344e0267c7b6abef0f / 위치: 보존 파일 objects/sha256/fd/fd206674ea52bc801e8020ad1f3155a78da4daced74e37344e0267c7b6abef0f
보존 원문 객체를 확보했으나 이 일괄 검증에서는 claim-bearing 범위를 재판정하지 않아 결론을 보류함.



자료 검증 verify_a40ebb48eeba3963fe87: verified-content-v1-0043 · 판단 보류
확인 범위: 일부 자료 확인 · 주장: context · S3ResearchAgent · 2026-07-18T14:58:40.912573Z
자료: R2-RESTIC:7f893ca5afd2cfb6fe320e9b61063ccc70e75a7a96589420038c8cf338b273be; archive-manifest-sha256=e28171fb69e141ce306d92dfe4b10e6cdc6e81d4fa910c30a846204dbcf8edf8; sha256=fd206674ea52bc801e8020ad1f3155a78da4daced74e37344e0267c7b6abef0f / 위치: 보존 파일 objects/sha256/fd/fd206674ea52bc801e8020ad1f3155a78da4daced74e37344e0267c7b6abef0f
보존 원문 객체를 확보했으나 이 일괄 검증에서는 claim-bearing 범위를 재판정하지 않아 결론을 보류함.



자료 검증 verify_9c763068179782227486: canonical-paper-v2-000ae22e · 판단 보류
확인 범위: 일부 자료 확인 · 주장: context · S3ResearchAgent · 2026-07-18T14:58:41.081437Z
자료: R2-RESTIC:7f893ca5afd2cfb6fe320e9b61063ccc70e75a7a96589420038c8cf338b273be; archive-manifest-sha256=e28171fb69e141ce306d92dfe4b10e6cdc6e81d4fa910c30a846204dbcf8edf8; sha256=fd206674ea52bc801e8020ad1f3155a78da4daced74e37344e0267c7b6abef0f / 위치: 보존 파일 objects/sha256/fd/fd206674ea52bc801e8020ad1f3155a78da4daced74e37344e0267c7b6abef0f
보존 원문 객체를 확보했으나 이 일괄 검증에서는 claim-bearing 범위를 재판정하지 않아 결론을 보류함.