Τεχνικές Βελτιστοποίησης Της Αποθήκευσης Και Αναζήτησης Big Data Χρησιμοποιώντας Την Βάση Δεδομένων Mongodb

Abstract

Η μεγαλύτερη πρόκληση των σύγχρονων υπολογιστικών συστημάτων είναι αναμφισβήτητα η αποδοτική αποθήκευση και ανάκτηση πολύ μεγάλου όγκου δεδομένων. Η ανάγκη αυτή έκανε την εμφάνισή της τα τελευταία χρόνια λόγω της έκρηξης δεδομένων που παρατηρείται στο διαδίκτυο και αποκτά ολοένα και μεγαλύτερη σημασία λόγω του πολύ μεγάλου εύρους πληροφοριών που μπορούμε να αντλήσουμε.Στην παρούσα εργασία μελετάμε τρόπους αποδοτικής αποθήκευσης και αναζήτησης πολυμεσικών δεδομένων. Το μεγάλο μέγεθος και η πολύπλοκη δομή των πολυμεσικών δεδομένων, μας αποτρέπει να κάνουμε χρήση παραδοσιακών τεχνικών αποθήκευσης όπως είναι οι σχεσιακές βάσεις δεδομένων και έτσι αναζητήσαμε λύσεις με χρήση τεχνικών Big Data.H λύση που προτείνουμε, είναι η χρησιμοποίηση μιας NoSQL βάσης δεδομένων και συγκεκριμένα της document database MongoDB. Η συγκεκριμένη βάση δεδομένων, είναι η δημοφιλέστερη στον τομέα της, λόγω της πολύ καλής κλιμακοσιμότητας που προσφέρει, γεγονός υψίστης σημασίας όταν έχουμε να διαχειριστούμε μεγάλο όγκο δεδομένων. Τέλος, καταφέραμε να βελτιστοποιήσουμε την αναζήτηση και την επεξεργασία των δεδομένων μας, χρησιμοποιώντας κάποιες από τις πιο σύγχρονες τεχνικές στον τομέα τον big data, όπως είναι τα ευρετήρια, το Sharding, το Replication και το μοντέλο Map-Reduce.