Υπηρεσίες μεσαίου λογισμικού: Επιλογή και εξαγωγή δεδομένων - Dummy

Ο πρωταρχικός σκοπός της υπηρεσίας επιλογής και εξόδου δεδομένων είναι να επιλέξει από (βρείτε μέσα) θέλετε να μετακινηθείτε στην αποθήκη δεδομένων και, στη συνέχεια, να εξαγάγετε (βγάλτε έξω) τα δεδομένα σε μια φόρμα που μπορεί να προετοιμαστεί για υπηρεσίες διασφάλισης ποιότητας.

Μπορείτε να χρησιμοποιήσετε έναν από τους δύο διαφορετικούς τύπους υπηρεσιών επιλογής και εξόρυξης για το περιβάλλον αποθήκευσης δεδομένων σας:

Βάλτε τα όλα και τα ταξινομήστε αργότερα: Βρείτε και εξαγάγετε όλα τα στοιχεία δεδομένων σε μια πηγή που θέλετε να φορτώσετε στην αποθήκη δεδομένων σας, ανεξάρτητα από το εάν ένα συγκεκριμένο στοιχείο έχει έχει προηγουμένως εξαχθεί.

Προσανατολισμός: Βρείτε και εξαγάγετε μόνο τα δεδομένα που έχουν προστεθεί πρόσφατα στην πηγή δεδομένων ή έχουν ενημερωθεί από την τελευταία εξαγωγή.

Ο πρώτος τύπος υπηρεσίας απαιτεί λιγότερο πολύπλοκη λογική για την εκτέλεση της εξαγωγής. Αλλά πρέπει να ασχοληθείτε με μεγαλύτερους όγκους (μερικές φορές πολύ μεγαλύτερους όγκους) δεδομένων παρά με τον δεύτερο τύπο, την υπηρεσία προσανατολισμένη στις μεταβολές.

Η μέθοδος επιλογής και εξαγωγής είναι αρκετά απλή όταν η πηγή σας είναι μια σχεσιακή βάση δεδομένων που έχει μια σφραγίδα χρόνου που μπορείτε να χρησιμοποιήσετε για να εντοπίσετε πότε προστέθηκε ή ενημερώθηκε μια σειρά δεδομένων.

Μπορείτε να συγκρίνετε μια σειρά δεδομένων σε σχέση με την ημερομηνία και την ώρα της τελευταίας διαδικασίας εξαγωγής για να προσδιορίσετε εάν πρέπει να επιλεγούν και να εξαχθούν δεδομένα. Αλλά όταν τα δεδομένα αποθηκεύονται σε ένα αρχείο που δεν έχει χρονική σφραγίδα (για παράδειγμα ένα αρχείο VSAM), αυτή η διαδικασία μπορεί να είναι σημαντικά πιο δύσκολη.

Ενδέχεται επίσης να αντιμετωπίσετε μια πρόκληση όταν τα δεδομένα προέλευσης έχουν διαγραφεί είτε από ένα αρχείο είτε από μια βάση δεδομένων. Εάν οι επιχειρηματικοί κανόνες για το περιβάλλον αποταμίευσης δεδομένων σας απαιτούν τη διαγραφή των αντίστοιχων δεδομένων από την αποθήκη, πρέπει να έχετε έναν τρόπο ανίχνευσης διαγραφών που έχουν πραγματοποιηθεί από την τελευταία διαδικασία εξαγωγής, ώστε να διασφαλιστεί ότι πραγματοποιούνται οι κατάλληλες διαγραφές στην αποθήκη σας.

Το αποτέλεσμα της επιλογής και της εξαγωγής είναι, επίσης, ένα απόσπασμα δεδομένων που είναι έτοιμο να υποβληθεί σε πρόσθετη επεξεργασία: έλεγχος της ποιότητας των δεδομένων.