Δεδομένα Εκσυγχρονισμός αποθήκης με αποθήκες δεδομένων Hadoop

Οι αποθήκες δεδομένων είναι πλέον υπό πίεση, προσπαθώντας να αντιμετωπίσουν αυξημένες απαιτήσεις για τους πεπερασμένους πόρους τους. Hadoop μπορεί να προσφέρει σημαντική ανακούφιση σε αυτήν την κατάσταση αποθήκης δεδομένων.

Η ταχεία άνοδος του όγκου των δεδομένων που παράγονται στον κόσμο επηρέασε επίσης τις αποθήκες δεδομένων, επειδή αυξάνεται ο όγκος των δεδομένων που διαχειρίζονται - εν μέρει επειδή περισσότερα δεδομένα δομημένα , το είδος των δεδομένων που πληκτρολογείται έντονα και δημιουργείται σε σειρές και στήλες - παράγεται, αλλά και γιατί συχνά πρέπει να αντιμετωπίσετε κανονιστικές απαιτήσεις που έχουν σχεδιαστεί για να διατηρήσουν πρόσβαση σε ιστορικά δεδομένα με δυνατότητα αναζήτησης.

παιδικά δεδομένα mart (ένα ξεχωριστό υποσύνολο της αποθήκης δεδομένων) για μια συγκεκριμένη εφαρμογή ανάλυσης. Επιπλέον, η ανάγκη αυξάνεται για τους αναλυτές να εκδίδουν νέα ερωτήματα κατά των δομημένων δεδομένων που αποθηκεύονται σε αποθήκες και αυτά τα ad hoc ερωτήματα μπορούν συχνά να χρησιμοποιούν σημαντικούς πόρους επεξεργασίας δεδομένων. Μερικές φορές μπορεί να αρκεί μια αναφορά μιας χρήσεως και, ενίοτε, είναι απαραίτητη μια διερευνητική ανάλυση για να βρεθούν ερωτήσεις που δεν έχουν ερωτηθεί ακόμη, που μπορεί να αποφέρουν σημαντική επιχειρηματική αξία.

Η κατώτατη γραμμή είναι ότι οι αποθήκες δεδομένων χρησιμοποιούνται συχνά για σκοπούς πέρα ​​από τον αρχικό σχεδιασμό τους.

Η εικόνα δείχνει, με τη χρήση αρχιτεκτονικής υψηλού επιπέδου, πως ο Hadoop μπορεί να ζήσει μαζί με τις αποθήκες δεδομένων και να εκπληρώσει ορισμένους από τους σκοπούς για τους οποίους δεν έχουν σχεδιαστεί.

Hadoop είναι αποθήκη

βοηθός, όχι αντικατάσταση αποθήκης. Ο Hadoop μπορεί να εκσυγχρονίσει ένα οικοσύστημα αποθήκευσης δεδομένων με τέσσερις τρόπους. εδώ είναι συνοπτικά:

Παρέχετε μια ζώνη προσγείωσης για όλα τα δεδομένα.

• Διατηρήστε τα δεδομένα για να δώσετε ένα αρχειοθετημένο αρχείο ψυχρών δεδομένων.

• Επωφεληθείτε από την αποτελεσματικότητα της μεγάλης κλίμακας επεξεργασίας παρτίδας Hadoop για την προεπεξεργασία και τη μετατροπή δεδομένων για την αποθήκη.

• Ενεργοποιήστε ένα περιβάλλον για την ανεύρεση δεδομένων ad hoc.