Η αποδιπλοποίηση δεδομένων είναι μια δημοφιλής και δημοφιλής τεχνολογία αποθήκευσης που βελτιστοποιεί τη χωρητικότητα αποθήκευσης. Εξαλείφει τα περιττά δεδομένα αφαιρώντας τα διπλά δεδομένα από το σύνολο δεδομένων, αφήνοντας μόνο ένα αντίγραφο. Όπως φαίνεται στο παρακάτω σχήμα. Αυτή η τεχνολογία μπορεί να μειώσει σημαντικά την ανάγκη για φυσική αποθήκευση χώρο για την κάλυψη της αυξανόμενης ζήτησης για αποθήκευση δεδομένων. Η τεχνολογία Dedupe μπορεί να αποφέρει πολλά πρακτικά οφέλη, συμπεριλαμβανομένων κυρίως των ακόλουθων πτυχών:
| (1) | Ικανοποιήστε τις απαιτήσεις ROI (Return On Investment)/TCO (Συνολικό κόστος ιδιοκτησίας). |
| (2) | Η ταχεία ανάπτυξη των δεδομένων μπορεί να ελεγχθεί αποτελεσματικά. |
| (3) | Αύξηση του αποτελεσματικού χώρου αποθήκευσης και βελτίωση της αποδοτικότητας αποθήκευσης. |
| (4) | Εξοικονομήστε το συνολικό κόστος αποθήκευσης και το κόστος διαχείρισης. |
| (5) | Αποθηκεύστε το εύρος ζώνης δικτύου μετάδοσης δεδομένων. |
| (6) | Εξοικονομήστε κόστος λειτουργίας και συντήρησης όπως χώρος, παροχή ρεύματος και ψύξη. |
Η τεχνολογία Dedupe χρησιμοποιείται ευρέως σε συστήματα δημιουργίας αντιγράφων ασφαλείας και αρχειοθέτησης δεδομένων, επειδή υπάρχουν πολλά διπλά δεδομένα μετά από πολλαπλά αντίγραφα ασφαλείας δεδομένων, κάτι που είναι πολύ κατάλληλο για αυτήν την τεχνολογία. Στην πραγματικότητα, η τεχνολογία dedupe μπορεί να χρησιμοποιηθεί σε πολλές περιπτώσεις, συμπεριλαμβανομένων των διαδικτυακών δεδομένων. δεδομένα κοντά στη γραμμή και συστήματα αποθήκευσης δεδομένων εκτός σύνδεσης. Μπορεί να εφαρμοστεί σε συστήματα αρχείων, διαχειριστές τόμων, NAS και sans. Το Dedupe μπορεί επίσης να χρησιμοποιηθεί για ανάκτηση δεδομένων από καταστροφή, μετάδοση δεδομένων και συγχρονισμό, καθώς μια τεχνολογία συμπίεσης δεδομένων μπορεί να χρησιμοποιηθεί για συσκευασία δεδομένων. Η τεχνολογία Dedupe μπορεί να βοηθήσει πολλές εφαρμογές να μειώσουν αποθήκευση δεδομένων, εξοικονόμηση εύρους ζώνης δικτύου, βελτίωση της αποδοτικότητας αποθήκευσης, μείωση του παραθύρου δημιουργίας αντιγράφων ασφαλείας και εξοικονόμηση κόστους.
Το Dedupe έχει δύο κύριες διαστάσεις: αναλογίες κατάργησης διπλότυπων και απόδοση. Η απόδοση του Dedupe εξαρτάται από τη συγκεκριμένη τεχνολογία υλοποίησης, ενώ ο ρυθμός Dedupe καθορίζεται από τα χαρακτηριστικά των ίδιων των δεδομένων και τα μοτίβα εφαρμογής, όπως φαίνεται στον παρακάτω πίνακα. Επί του παρόντος, οι προμηθευτές αποθηκευτικού χώρου αναφέρουν τα ποσοστά κατάργησης διπλότυπων από 20:1 έως 500:1.
| Υψηλό ποσοστό αποδιπλασιασμού | Χαμηλό ποσοστό αποδιπλασιασμού |
| Δεδομένα που δημιουργούνται από τον χρήστη | Δεδομένα από τον φυσικό κόσμο |
| Χαμηλό ποσοστό αλλαγής δεδομένων | Δεδομένα υψηλό ποσοστό αλλαγής |
| Δεδομένα αναφοράς, ανενεργά δεδομένα | Ενεργά δεδομένα |
| Εφαρμογή χαμηλού ρυθμού αλλαγής δεδομένων | Εφαρμογή υψηλής ταχύτητας αλλαγής δεδομένων |
| Πλήρες αντίγραφο ασφαλείας δεδομένων | Αυξητική δημιουργία αντιγράφων ασφαλείας δεδομένων |
| Μακροχρόνια αποθήκευση δεδομένων | Βραχυπρόθεσμη αποθήκευση δεδομένων |
| Μεγάλη γκάμα εφαρμογών δεδομένων | Μικρή γκάμα εφαρμογών δεδομένων |
| Συνεχής επιχειρησιακή επεξεργασία δεδομένων | Γενική επιχειρησιακή επεξεργασία δεδομένων |
| Μικρή κατάτμηση δεδομένων | Τμηματοποίηση μεγάλων δεδομένων |
| Επιμήκυνση τμηματοποίησης δεδομένων | Τμηματοποίηση δεδομένων σταθερού μήκους |
| Αντιληπτό περιεχόμενο δεδομένων | Άγνωστο περιεχόμενο δεδομένων |
| Αφαίρεση δεδομένων χρόνου | Απαλοιφή χωρικών δεδομένων |
Dedupe Σημεία Εφαρμογής
Διάφοροι παράγοντες πρέπει να λαμβάνονται υπόψη κατά την ανάπτυξη ή την εφαρμογή της τεχνολογίας Dedupe, καθώς αυτοί οι παράγοντες επηρεάζουν άμεσα την απόδοση και την αποτελεσματικότητά της.
| (1) | Τι | Ποια δεδομένα αποσταθμίζονται; |
| (2) | Οταν | Πότε θα εξαλειφθεί το βάρος; |
| (3) | Οπου | Πού είναι η εξάλειψη βάρους; |
| (4) | Πως | Πώς να μειώσετε το βάρος; |
Dedupe Key Technology
Η διαδικασία κατάργησης διπλότυπων του συστήματος αποθήκευσης γενικά είναι η εξής: πρώτα απ 'όλα το αρχείο δεδομένων χωρίζεται σε ένα σύνολο δεδομένων, για κάθε μπλοκ δεδομένων για τον υπολογισμό του δακτυλικού αποτυπώματος και, στη συνέχεια, με βάση τις λέξεις-κλειδιά αναζήτησης Hash δακτυλικών αποτυπωμάτων, η αντιστοίχιση υποδεικνύει τα δεδομένα για το διπλότυπο μπλοκ δεδομένων, αποθηκεύει μόνο τον αριθμό ευρετηρίου μπλοκ δεδομένων, διαφορετικά σημαίνει ότι το μπλοκ δεδομένων είναι το μόνο κομμάτι μιας νέας, αποθήκευσης μπλοκ δεδομένων και δημιουργεί σχετικές μετα-πληροφορίες. Έτσι, ένα φυσικό αρχείο στο σύστημα αποθήκευσης αντιστοιχεί σε μια λογική αναπαράσταση ενός σύνολο μεταδεδομένων FP. Κατά την ανάγνωση του αρχείου, διαβάστε πρώτα το λογικό αρχείο και, στη συνέχεια, σύμφωνα με τη σειρά FP, αφαιρέστε το αντίστοιχο μπλοκ δεδομένων από το σύστημα αποθήκευσης, επαναφέρετε το αντίγραφο του φυσικού αρχείου. Αυτό φαίνεται από την παραπάνω διαδικασία ότι οι βασικές τεχνολογίες του Dedupe περιλαμβάνουν κυρίως τμηματοποίηση μπλοκ δεδομένων αρχείων, υπολογισμό δακτυλικών αποτυπωμάτων μπλοκ δεδομένων και ανάκτηση μπλοκ δεδομένων.
(1) Τμηματοποίηση μπλοκ δεδομένων αρχείου
(2) Υπολογισμός δακτυλικών αποτυπωμάτων μπλοκ δεδομένων
(3) Ανάκτηση μπλοκ δεδομένων
Για να βρείτε αυτά τα προτεινόμενα μοντέλα για να ξεκινήσετε την κατάργηση διπλότυπων πακέτων δικτύου:
Mylinking™ Network Packet Broker (NPB) ML-NPB-640048*10GE SFP+ συν 4*40GE/100GE QSFP28, Μέγιστο 880 Gbps
Mylinking™ Network Packet Broker (NPB) ML-NPB-56606*40GE/100GE QSFP28 συν 48*10GE/25GE SFP28, μέγιστο 1,8 Tbps
Mylinking™ Network Packet Broker (NPB) ML-NPB-506048*10GE SFP+ συν 2*40GE QSFP, μέγιστο 560 Gbps
Mylinking™ Network Packet Broker (NPB) ML-NPB-486048*10GE SFP+, Max 480Gbps, Function Plus
Mylinking™ Network Packet Broker (NPB) ML-NPB-481048*10GE SFP+, Μέγιστο 480 Gbps
Mylinking™ Network Packet Broker (NPB) ML-NPB-2410P24*10GE SFP+, Μέγιστο 240 Gbps, Λειτουργία DPI
Mylinking™ Network Packet Broker (NPB) ML-NPB-6400
48*10GE SFP+ συν 4*40GE/100GE QSFP28, Μέγιστο 880 Gbps
Ώρα δημοσίευσης: Οκτ-18-2022
