Η Αποδιπλασιασμός Δεδομένων είναι μια δημοφιλής και δημοφιλής τεχνολογία αποθήκευσης που βελτιστοποιεί την χωρητικότητα αποθήκευσης. Εξαλείφει τα περιττά δεδομένα αφαιρώντας διπλότυπα δεδομένα από το σύνολο δεδομένων, αφήνοντας μόνο ένα αντίγραφο. Όπως φαίνεται στο παρακάτω σχήμα. Αυτή η τεχνολογία μπορεί να μειώσει σημαντικά την ανάγκη για φυσικό χώρο αποθήκευσης για να καλύψει την αυξανόμενη ζήτηση για αποθήκευση δεδομένων. Η τεχνολογία Αποδιπλασιασμού μπορεί να προσφέρει πολλά πρακτικά οφέλη, συμπεριλαμβανομένων κυρίως των ακόλουθων πτυχών:
| (1) | Πληροίτε τις απαιτήσεις ROI (Απόδοση Επένδυσης)/TCO (Συνολικό Κόστος Ιδιοκτησίας). |
| (2) | Η ταχεία αύξηση των δεδομένων μπορεί να ελεγχθεί αποτελεσματικά. |
| (3) | Αυξήστε τον αποτελεσματικό χώρο αποθήκευσης και βελτιώστε την αποδοτικότητα αποθήκευσης. |
| (4) | Εξοικονομήστε το συνολικό κόστος αποθήκευσης και το κόστος διαχείρισης. |
| (5) | Εξοικονομήστε το εύρος ζώνης δικτύου της μετάδοσης δεδομένων. |
| (6) | Εξοικονομήστε κόστος λειτουργίας και συντήρησης, όπως χώρο, παροχή ρεύματος και ψύξη. |
Η τεχνολογία Dedupe χρησιμοποιείται ευρέως σε συστήματα δημιουργίας αντιγράφων ασφαλείας και αρχειοθέτησης δεδομένων, επειδή υπάρχουν πολλά διπλότυπα δεδομένα μετά από πολλαπλά αντίγραφα ασφαλείας δεδομένων, κάτι που είναι πολύ κατάλληλο για αυτήν την τεχνολογία. Στην πραγματικότητα, η τεχνολογία dedupe μπορεί να χρησιμοποιηθεί σε πολλές περιπτώσεις, συμπεριλαμβανομένων των online δεδομένων, των near-line δεδομένων και των συστημάτων αποθήκευσης δεδομένων εκτός σύνδεσης. Μπορεί να εφαρμοστεί σε συστήματα αρχείων, διαχειριστές τόμων, NAS και sans. Η Dedupe μπορεί επίσης να χρησιμοποιηθεί για την ανάκτηση δεδομένων από καταστροφές, τη μετάδοση και τον συγχρονισμό δεδομένων, καθώς η τεχνολογία συμπίεσης δεδομένων μπορεί να χρησιμοποιηθεί για τη συσκευασία δεδομένων. Η τεχνολογία Dedupe μπορεί να βοηθήσει πολλές εφαρμογές να μειώσουν την αποθήκευση δεδομένων, να εξοικονομήσουν εύρος ζώνης δικτύου, να βελτιώσουν την αποδοτικότητα αποθήκευσης, να μειώσουν το παράθυρο δημιουργίας αντιγράφων ασφαλείας και να εξοικονομήσουν κόστος.
Το Dedupe έχει δύο κύριες διαστάσεις: τους λόγους deduplocation και την απόδοση. Η απόδοση του Dedupe εξαρτάται από την συγκεκριμένη τεχνολογία υλοποίησης, ενώ ο ρυθμός Dedupe καθορίζεται από τα χαρακτηριστικά των ίδιων των δεδομένων και τα πρότυπα εφαρμογής, όπως φαίνεται στον παρακάτω πίνακα. Οι προμηθευτές αποθήκευσης αναφέρουν επί του παρόντος ποσοστά deduplication που κυμαίνονται από 20:1 έως 500:1.
| Υψηλό ποσοστό κατάργησης διπλότυπων | Χαμηλό ποσοστό απάλειψης διπλότυπων |
| Δεδομένα που δημιουργούνται από τον χρήστη | Δεδομένα από τον φυσικό κόσμο |
| Χαμηλός ρυθμός μεταβολής δεδομένων | Υψηλός ρυθμός αλλαγής δεδομένων |
| Δεδομένα αναφοράς, ανενεργά δεδομένα | Ενεργά δεδομένα |
| Εφαρμογή χαμηλού ρυθμού αλλαγής δεδομένων | Εφαρμογή υψηλού ρυθμού αλλαγής δεδομένων |
| Πλήρες αντίγραφο ασφαλείας δεδομένων | Σταδιακή δημιουργία αντιγράφων ασφαλείας δεδομένων |
| Μακροπρόθεσμη αποθήκευση δεδομένων | Βραχυπρόθεσμη αποθήκευση δεδομένων |
| Ευρύ φάσμα εφαρμογών δεδομένων | Μικρό εύρος εφαρμογών δεδομένων |
| Συνεχής επεξεργασία επιχειρηματικών δεδομένων | Γενική επεξεργασία δεδομένων επιχειρήσεων |
| Τμηματοποίηση μικρών δεδομένων | Τμηματοποίηση μεγάλων δεδομένων |
| Επιμήκης τμηματοποίηση δεδομένων | Τμηματοποίηση δεδομένων σταθερού μήκους |
| Αντιληπτό περιεχόμενο δεδομένων | Άγνωστο περιεχόμενο δεδομένων |
| Αφαίρεση διπλότυπων δεδομένων χρόνου | Απαλοιφή διπλότυπων χωρικών δεδομένων |
Σημεία υλοποίησης Dedupe
Κατά την ανάπτυξη ή την εφαρμογή της τεχνολογίας Dedupe θα πρέπει να λαμβάνονται υπόψη διάφοροι παράγοντες, καθώς αυτοί οι παράγοντες επηρεάζουν άμεσα την απόδοση και την αποτελεσματικότητά της.
| (1) | Τι | Ποια δεδομένα αποσταθμίζονται; |
| (2) | Οταν | Πότε θα εξαλειφθεί το βάρος; |
| (3) | Οπου | Πού είναι η απώλεια βάρους; |
| (4) | Πως | Πώς να μειώσετε το βάρος; |
Τεχνολογία Dedupe Key
Η διαδικασία deduplication του συστήματος αποθήκευσης γενικά είναι η εξής: πρώτα απ 'όλα, το αρχείο δεδομένων χωρίζεται σε ένα σύνολο δεδομένων, για κάθε μπλοκ δεδομένων υπολογίζεται το δακτυλικό αποτύπωμα και, στη συνέχεια, με βάση τις λέξεις-κλειδιά αναζήτησης Hash δακτυλικών αποτυπωμάτων, η αντιστοίχιση υποδεικνύει τα δεδομένα για τα διπλότυπα μπλοκ δεδομένων, αποθηκεύει μόνο τον αριθμό ευρετηρίου του μπλοκ δεδομένων, διαφορετικά σημαίνει ότι το μπλοκ δεδομένων είναι το μόνο κομμάτι ενός νέου, αποθηκεύει το μπλοκ δεδομένων και δημιουργεί σχετικές μετα-πληροφορίες. Έτσι, ένα φυσικό αρχείο στο σύστημα αποθήκευσης αντιστοιχεί σε μια λογική αναπαράσταση ενός συνόλου μεταδεδομένων FP. Κατά την ανάγνωση του αρχείου, πρώτα διαβάστε το λογικό αρχείο και, σύμφωνα με την ακολουθία FP, αφαιρέστε το αντίστοιχο μπλοκ δεδομένων από το σύστημα αποθήκευσης και επαναφέρετε το αντίγραφο του φυσικού αρχείου. Από την παραπάνω διαδικασία μπορεί να φανεί ότι οι βασικές τεχνολογίες του Dedupe περιλαμβάνουν κυρίως την τμηματοποίηση μπλοκ δεδομένων αρχείων, τον υπολογισμό δακτυλικών αποτυπωμάτων μπλοκ δεδομένων και την ανάκτηση μπλοκ δεδομένων.
(1) Τμηματοποίηση μπλοκ δεδομένων αρχείου
(2) Υπολογισμός δακτυλικού αποτυπώματος μπλοκ δεδομένων
(3) Ανάκτηση μπλοκ δεδομένων
Για να βρείτε αυτά τα προτεινόμενα μοντέλα για να ξεκινήσετε την Απαλοιφή Διπλότυπων Πακέτων Δικτύου:
Mylinking™ Network Packet Broker (NPB) ML-NPB-640048*10GE SFP+ συν 4*40GE/100GE QSFP28, μέγιστο 880Gbps
Mylinking™ Network Packet Broker (NPB) ML-NPB-56606*40GE/100GE QSFP28 συν 48*10GE/25GE SFP28, μέγιστο 1.8Tbps
Mylinking™ Network Packet Broker (NPB) ML-NPB-506048*10GE SFP+ συν 2*40GE QSFP, μέγιστο 560Gbps
Mylinking™ Network Packet Broker (NPB) ML-NPB-486048*10GE SFP+, μέγιστο 480Gbps, λειτουργία συν
Mylinking™ Network Packet Broker (NPB) ML-NPB-481048*10GE SFP+, μέγιστο 480Gbps
Mylinking™ Network Packet Broker (NPB) ML-NPB-2410P24*10GE SFP+, μέγιστο 240Gbps, λειτουργία DPI
Mylinking™ Network Packet Broker (NPB) ML-NPB-6400
48*10GE SFP+ συν 4*40GE/100GE QSFP28, μέγιστο 880Gbps
Ώρα δημοσίευσης: 18 Οκτωβρίου 2022
