Deduplikacija podataka je popularna i tražena tehnologija pohrane koja optimizira kapacitet pohrane. Uklanja redundantne podatke uklanjanjem dupliciranih podataka iz skupa podataka, ostavljajući samo jednu kopiju. Kao što je prikazano na slici ispod. Ova tehnologija može uvelike smanjiti potrebu za fizičkim prostorom za pohranu kako bi se zadovoljila rastuća potražnja za pohranom podataka. Tehnologija deduplikacije može donijeti mnoge praktične koristi, uglavnom uključujući sljedeće aspekte:
| (1) | Ispunite zahtjeve ROI-a (povrat ulaganja)/TCO-a (ukupni trošak vlasništva); |
| (2) | Brzi rast podataka može se učinkovito kontrolirati; |
| (3) | Povećanje učinkovitog prostora za pohranu i poboljšanje učinkovitosti skladištenja; |
| (4) | Uštedite ukupne troškove skladištenja i troškove upravljanja; |
| (5) | Uštedite mrežnu propusnost prijenosa podataka; |
| (6) | Uštedite troškove rada i održavanja, kao što su prostor, napajanje i hlađenje. |
Dedupe tehnologija se široko koristi u sustavima za sigurnosno kopiranje i arhiviranje podataka, jer nakon višestrukih sigurnosnih kopija podataka postoji mnogo dupliciranih podataka, što je vrlo pogodno za ovu tehnologiju. Zapravo, dedupe tehnologija može se koristiti u mnogim situacijama, uključujući online podatke, podatke u blizini linije i offline sustave za pohranu podataka. Može se implementirati u datotečne sustave, upravitelje volumena, NAS i sans. Dedupe se također može koristiti za oporavak podataka od katastrofe, prijenos i sinkronizaciju podataka, a tehnologija kompresije podataka može se koristiti za pakiranje podataka. Dedupe tehnologija može pomoći mnogim aplikacijama da smanje pohranu podataka, uštede propusnost mreže, poboljšaju učinkovitost pohrane, smanje prozor sigurnosne kopije i uštede troškove.
Deduplikacija ima dvije glavne dimenzije: omjere deduplikacije i performanse. Performanse deduplikacije ovise o specifičnoj tehnologiji implementacije, dok je stopa deduplikacije određena karakteristikama samih podataka i obrascima aplikacije, kao što je prikazano u donjoj tablici. Dobavljači pohrane trenutno izvještavaju o stopama deduplikacije u rasponu od 20:1 do 500:1.
| Visoka stopa deduplikacije | Niska stopa deduplikacije |
| Podaci koje je kreirao korisnik | Podaci iz prirodnog svijeta |
| Podaci niske stope promjene | Visoka stopa promjene podataka |
| Referentni podaci, neaktivni podaci | Aktivni podaci |
| Primjena niske stope promjene podataka | Aplikacija za visoku stopu promjene podataka |
| Potpuna sigurnosna kopija podataka | Inkrementalna sigurnosna kopija podataka |
| Dugoročno pohranjivanje podataka | Kratkoročno pohranjivanje podataka |
| Širok raspon primjena podataka | Mali raspon podatkovnih aplikacija |
| Kontinuirana obrada poslovnih podataka | Opća obrada poslovnih podataka |
| Segmentacija malih podataka | Segmentacija velikih podataka |
| Produžena segmentacija podataka | Segmentacija podataka fiksne duljine |
| Percipirani sadržaj podataka | Sadržaj podataka nepoznat |
| Deduplikacija vremenskih podataka | Deduplikacija prostornih podataka |
Točke implementacije deduplikata
Prilikom razvoja ili primjene Dedupe tehnologije treba uzeti u obzir različite čimbenike, jer ti čimbenici izravno utječu na njezine performanse i učinkovitost.
| (1) | Što | Koji se podaci deponderiraju? |
| (2) | Kada | Kada će se težina ukloniti? |
| (3) | Gdje | Gdje je gubitak težine? |
| (4) | Kako | Kako smanjiti težinu? |
Tehnologija dedupiranja ključeva
Proces deduplikacije u sustavu za pohranu općenito je sljedeći: prvo se podatkovna datoteka dijeli na skup podataka, za svaki blok podataka izračunava se otisak prsta, a zatim se na temelju ključnih riječi za pretraživanje hash-a otiska prsta, podudaranje označava podatke za duplicirane blokove podataka, pohranjuje se samo indeksni broj bloka podataka, inače to znači da je blok podataka jedini dio novog, pohranjuje se blok podataka i stvara relevantne metapodatke. Dakle, fizička datoteka u sustavu za pohranu odgovara logičkom prikazu skupa FP metapodataka. Prilikom čitanja datoteke, prvo se pročita logička datoteka, zatim se prema FP nizu izvadi odgovarajući blok podataka iz sustava za pohranu i vrati kopija fizičke datoteke. Iz gornjeg postupka može se vidjeti da ključne tehnologije Deduplikacije uglavnom uključuju segmentaciju blokova podataka datoteke, izračun otiska bloka podataka i dohvaćanje blokova podataka.
(1) Segmentacija blokova podataka datoteke
(2) Izračun otiska bloka podataka
(3) Dohvaćanje blokova podataka
Da biste pronašli ove preporučene modele za pokretanje deduplikacije mrežnih paketa:
Mylinking™ mrežni paketni posrednik (NPB) ML-NPB-640048*10GE SFP+ plus 4*40GE/100GE QSFP28, maks. 880 Gbps
Mylinking™ mrežni paketni posrednik (NPB) ML-NPB-56606*40GE/100GE QSFP28 plus 48*10GE/25GE SFP28, maks. 1,8 Tbps
Mylinking™ mrežni posrednik paketa (NPB) ML-NPB-506048*10GE SFP+ plus 2*40GE QSFP, maks. 560 Gbps
Mylinking™ mrežni posrednik paketa (NPB) ML-NPB-486048*10GE SFP+, maks. 480 Gbps, funkcija Plus
Mylinking™ mrežni paketni posrednik (NPB) ML-NPB-481048*10GE SFP+, maks. 480 Gbps
Mylinking™ mrežni posrednik paketa (NPB) ML-NPB-2410P24*10GE SFP+, maks. 240 Gbps, DPI funkcija
Mylinking™ mrežni paketni posrednik (NPB) ML-NPB-6400
48*10GE SFP+ plus 4*40GE/100GE QSFP28, maks. 880 Gbps
Vrijeme objave: 18. listopada 2022.
