Data De-duplikering er en populær og populær lagringsteknologi, der optimerer lagerkapaciteten. Den eliminerer overflødige data ved at fjerne duplikerede data fra datasættet og efterlader kun én kopi.Som vist i figuren nedenfor.Denne teknologi kan i høj grad reducere behovet for fysisk lagring plads til at imødekomme den voksende efterspørgsel efter datalagring.Dedupe-teknologi kan medføre mange praktiske fordele, hovedsageligt herunder følgende aspekter:
| (1) | Opfyld kravene til ROI(Return On Investment)/TCO(Total Cost of Ownership); |
| (2) | Den hurtige vækst af data kan kontrolleres effektivt; |
| (3) | Øg effektiv lagerplads og forbedre lagereffektiviteten; |
| (4) | Gem de samlede lageromkostninger og administrationsomkostninger; |
| (5) | Gem netværksbåndbredden for datatransmission; |
| (6) | Spar drifts- og vedligeholdelsesomkostninger såsom plads, strømforsyning og køling. |
Dedupe-teknologi er meget udbredt i datasikkerhedskopiering og arkiveringssystemer, fordi der er mange duplikerede data efter flere sikkerhedskopier af data, hvilket er meget velegnet til denne teknologi. Faktisk kan dedupe-teknologi bruges i mange situationer, herunder online data, near-line data og offline datalagringssystemer. Det kan implementeres i filsystemer, volumenadministratorer, NAS og sans.Dedupe kan også bruges til datakatastrofegendannelse, datatransmission og synkronisering, da en datakomprimeringsteknologi kan bruges til datapakning.Dedupe-teknologi kan hjælpe mange applikationer med at reducere datalagring, spar netværksbåndbredde, forbedre lagringseffektiviteten, reducer backup-vinduet og spar omkostninger.
Dedupe har to hoveddimensioner: deduplocation-forhold og ydeevne. Dedupe-ydeevne afhænger af den specifikke implementeringsteknologi, mens Dedupe-hastigheden bestemmes af egenskaberne ved selve dataene og applikationsmønstrene, som vist i tabellen nedenfor. Lagerleverandører rapporterer i øjeblikket deduplikeringshastigheder fra 20:1 til 500:1.
| Høj deduplikeringsrate | Lav deduplikeringsrate |
| Data oprettet af brugeren | Data fra den naturlige verden |
| Data lav ændringshastighed | Data høj ændringshastighed |
| Referencedata, inaktive data | Aktive data |
| Anvendelse med lav dataændringshastighed | Anvendelse med høj dataændringshastighed |
| Fuld data backup | Inkrementel sikkerhedskopiering af data |
| Langtidslagring af data | Korttidslagring af data |
| Bredt udvalg af dataapplikationer | Lille udvalg af dataapplikationer |
| Kontinuerlig dataforretningsbehandling | Generel dataforretningsbehandling |
| Lille datasegmentering | Big data segmentering |
| Langstrakt datasegmentering | Datasegmentering med fast længde |
| Dataindhold opfattet | Dataindhold ukendt |
| Tidsdata deduplikering | Deduplikering af rumlige data |
Dedupe Implementeringspunkter
Forskellige faktorer bør tages i betragtning ved udvikling eller anvendelse af Dedupe-teknologi, da disse faktorer direkte påvirker dens ydeevne og effektivitet.
| (1) | Hvad | Hvilke data er afvægtet? |
| (2) | Når | Hvornår vil vægten blive elimineret? |
| (3) | Hvor | Hvor er vægttabet? |
| (4) | Hvordan | Hvordan reducerer man vægten? |
Dedupe Key-teknologi
Deduplikeringsprocessen for lagringssystem generelt er dette: først og fremmest er datafilen opdelt i et sæt data, for hver blok af data for at beregne fingeraftrykket, og derefter baseret på fingeraftryk Hash-søgenøgleord, matching angiver dataene for duplikatet datablokke, gemmer kun datablokindeksnummer, ellers betyder det, at datablokken er den eneste del af en ny, lagring af datablok og skabe relevant metainformation. Således svarer en fysisk fil i lagersystemet til en logisk repræsentation af en sæt af FP-metadata.Når du læser filen, skal du først læse den logiske fil, derefter i henhold til FP-sekvensen, tage den tilsvarende datablok ud fra lagersystemet, gendan kopien af den fysiske fil. Det kan ses fra ovenstående proces at nøgleteknologierne i Dedupe hovedsageligt omfatter fildatabloksegmentering, datablok-fingeraftryksberegning og datablokhentning.
(1) Fildatabloksegmentering
(2) Datablok fingeraftryksberegning
(3) Hentning af datablok
For at finde disse anbefalede modeller for at starte din Network Packet Deduplication:
Mylinking™ Network Packet Broker (NPB) ML-NPB-640048*10GE SFP+ plus 4*40GE/100GE QSFP28, maks. 880 Gbps
Mylinking™ Network Packet Broker (NPB) ML-NPB-56606*40GE/100GE QSFP28 plus 48*10GE/25GE SFP28, maks. 1,8 Tbps
Mylinking™ Network Packet Broker (NPB) ML-NPB-506048*10GE SFP+ plus 2*40GE QSFP, maks. 560 Gbps
Mylinking™ Network Packet Broker (NPB) ML-NPB-486048*10GE SFP+, Max 480 Gbps, Funktion Plus
Mylinking™ Network Packet Broker (NPB) ML-NPB-481048*10GE SFP+, Max 480 Gbps
Mylinking™ Network Packet Broker (NPB) ML-NPB-2410P24*10GE SFP+, Max 240Gbps, DPI-funktion
Mylinking™ Network Packet Broker (NPB) ML-NPB-6400
48*10GE SFP+ plus 4*40GE/100GE QSFP28, maks. 880 Gbps
Indlægstid: 18. oktober 2022
