Data De-Duplication은 스토리지 용량을 최적화하는 인기 있고 인기있는 스토리지 기술입니다. 데이터 세트에서 중복 데이터를 제거하여 중복 데이터를 제거하여 하나의 사본 만 남겨 둡니다.이 기술은 데이터 저장에 대한 수요를 충족시키기 위해 물리적 저장 공간에 대한 요구를 크게 줄일 수 있습니다.
(1) | ROI (투자 수익)/TCO (총 소유 비용) 요구 사항을 충족시킵니다. |
(2) | 데이터의 빠른 성장은 효과적으로 제어 될 수 있습니다. |
(3) | 효과적인 저장 공간을 높이고 스토리지 효율성을 향상시킵니다. |
(4) | 총 스토리지 비용 및 관리 비용을 절약하십시오. |
(5) | 데이터 전송의 네트워크 대역폭을 저장합니다. |
(6) | 공간, 전원 공급 장치 및 냉각과 같은 운영 및 유지 보수 비용을 절약하십시오. |
Dedupe 기술은 데이터 백업 및 아카이빙 시스템에 널리 사용됩니다.이 기술에 매우 적합한 여러 백업 후에 많은 중복 데이터가 있기 때문에 실제로 Dedupe 기술은 온라인 데이터, 거의 라인 데이터 저장 시스템 및 오프라인 데이터 저장 시스템을 포함한 많은 상황에서 사용할 수 있습니다. 파일 시스템, Volume Manager, NAS 및 SANS.Dedupe에서 구현할 수 있습니다. 데이터 압축 기술은 데이터 패키징에 사용될 수 있으므로 데이터 재해 복구, 데이터 전송 및 동기화에도 사용될 수 있습니다. Dedupe 기술은 많은 애플리케이션이 데이터 저장을 줄이고, 네트워크 대역폭을 저장하고, 백업 창을 줄이고, 비용을 절약 할 수 있습니다.
Dedupe는 두 가지 주요 차원을 가지고 있습니다. deduplocation 비율과 성능 .Dedupe 성능은 특정 구현 기술에 따라 다르며, Dedupe rate는 아래 표에 표시된 것처럼 데이터 자체의 특성 및 응용 프로그램 패턴에 따라 결정됩니다. 현재 공급 업체는 현재 20 : 1에서 500 : 1까지의 제거율을보고합니다.
중복 제거율이 높습니다 | 중복 제거율이 낮습니다 |
사용자가 만든 데이터 | 자연 세계의 데이터 |
데이터가 낮은 변화율 | 데이터 높은 변화율 |
참조 데이터, 비활성 데이터 | 활성 데이터 |
낮은 데이터 변경 속도 응용 프로그램 | 높은 데이터 변경 속도 응용 프로그램 |
전체 데이터 백업 | 증분 데이터 백업 |
데이터 장기 스토리지 | 데이터 단기 스토리지 |
광범위한 데이터 애플리케이션 | 소규모 데이터 애플리케이션 |
지속적인 데이터 비즈니스 처리 | 일반 데이터 비즈니스 처리 |
작은 데이터 세분화 | 빅 데이터 세분화 |
길쭉한 데이터 세분화 | 고정 길이 데이터 세분화 |
인식 된 데이터 컨텐츠 | 데이터 컨텐츠는 알려지지 않았습니다 |
시간 데이터 중복 제거 | 공간 데이터 중복 제거 |
Dedupe 구현 포인트
이러한 요소가 성능과 효과에 직접적인 영향을 미치기 때문에 Dedupe 기술을 개발하거나 적용 할 때 다양한 요소를 고려해야합니다.
(1) | 무엇 | 어떤 데이터가 중량화되어 있습니까? |
(2) | 언제 | 무게는 언제 제거됩니까? |
(3) | 어디 | 체중 제거는 어디에 있습니까? |
(4) | 어떻게 | 체중을 줄이는 방법? |
Dedupe 키 기술
일반적으로 스토리지 시스템의 중복 복제 프로세스는 다음과 같습니다. 우선 모든 데이터 파일은 지문을 계산하기위한 각 데이터 블록에 대해 먼저 데이터 세트로 나뉘어지고 지문 해시 검색 키워드를 기반으로 일치하는 데이터 블록에 대한 데이터가 데이터 블록 인덱스 번호에 대한 데이터를 저장합니다. 그렇지 않으면 데이터 블록은 데이터 블록의 유일한 조각, 관련된 메타 파일입니다. FP 메타 데이터 세트의 논리적 표현. 파일을 읽고 먼저 논리 파일을 읽은 다음 FP 시퀀스에 따라 스토리지 시스템에서 해당 데이터 블록을 가져 가서 물리적 파일의 사본을 복원합니다. Dedupe의 주요 기술에는 파일 데이터 차단, 데이터 블록 계산 및 데이터 블록 검색이 포함 된 위의 프로세스에서 볼 수 있습니다.
(1) 파일 데이터 블록 세분화
(2) 데이터 블록 지문 계산
(3) 데이터 블록 검색
네트워크 패킷 중복 제거를 시작하는이 권장 모델을 찾으려면 다음과 같습니다.
MyLinking ™ 네트워크 패킷 브로커 (NPB) ML-NPB-640048*10GE SFP+ PLUS 4*40GE/100GE QSFP28, 최대 880GBPS
MyLinking ™ 네트워크 패킷 브로커 (NPB) ML-NPB-56606*40ge/100ge QSFP28 + 48*10GE/25GE SFP28, 최대 1.8TBPS
MyLinking ™ 네트워크 패킷 브로커 (NPB) ML-NPB-506048*10GE SFP+ PLUS 2*40GE QSFP, 최대 560GBPS
MyLinking ™ 네트워크 패킷 브로커 (NPB) ML-NPB-486048*10GE SFP+, 최대 480GBPS, 기능 플러스
MyLinking ™ 네트워크 패킷 브로커 (NPB) ML-NPB-481048*10GE SFP+, 최대 480Gbps
MyLinking ™ 네트워크 패킷 브로커 (NPB) ML-NPB-2410P24*10GE SFP+, 최대 240GBPS, DPI 기능
MyLinking ™ 네트워크 패킷 브로커 (NPB) ML-NPB-6400
48*10GE SFP+ PLUS 4*40GE/100GE QSFP28, 최대 880GBPS
시간 후 : 10 월 -18-2022