Ανάλυση Δεδομένων Από Κοινωνικά Δίκτυα Για Τη Μελέτη Των Συναισθημάτων Των Χρηστών

Abstract

Αντικείμενο της παρούσας διπλωματικής αποτελεί η ανάλυση δεδομένων τουκοινωνικού δικτύου Twitter για την μελέτη των συναισθημάτων των χρηστών. Τοσύνολο των δεδομένων που χρησιμοποιείται αποτελείται από πραγματικά tweets, ταοποία δημοσιεύθηκαν στη βάση του Twitter, έχουν στο περιεχόμενό τους τη λέξηκλειδί refugees και συγκεντρώθηκαν σε διάστημα 4 εβδομάδων σε συγκεκριμένες ώρεςτης ημέρας. Η καταγραφή αυτών των δεδομένων έγινε με την βοήθεια του ApacheNiFi.Αρχικά, η εργασία έχει σα στόχο την υλοποίηση ενός συστήματος το οποίο ανάπάσα στιγμή είναι σε θέση να λαμβάνει μια λέξη κλειδί και να συγκεντρώνει τα tweetsτα οποία πραγματοποιήθηκαν με την λέξη αυτή στο περιεχόμενό τους. Εν συνεχεία, νατα μεταφέρει και να τα αποθηκεύει σε μορφή πίνακα στον αποθηκευτικό του χώρο.Επίσης, να μπορεί να συνδυάζει αυτές τις αρχικές πληροφορίες με ένα σύνολοδευτερευόντων πληροφοριών, ώστε με την χρήση αυτών και περαιτέρω ανάλυση, ναείναι σε θέση να παράγει χρήσιμα στατιστικά στοιχεία. Για τον σκοπό αυτόχρησιμοποιήθηκαν εργαλεία ανοιχτού κώδικα όπως Apache Hadoop, Apache NiFi καιApache Hive. Σε πρώτη φάση, γίνεται ενασχόληση με ζητήματα όπως η αποθήκευσηκαι ο καθαρισμός των δεδομένων.Σε δεύτερη φάση, η εργασία καταπιάνεται με το πεδίο της εξόρυξης γνώσης απόδεδομένα (data mining), με την εφαρμογή ενός αλγορίθμου κατηγοριοποίησης.Συγκεκριμένα, γίνεται προσπάθεια για κατηγοριοποίηση σε τρεις ευρύτερες ομάδες τουσυναισθήματος που εκφράζει κάθε tweet με βάση τα στοιχεία που εξήχθησαν. Στόχοςείναι η αναπαράσταση και απεικόνιση των αποτελεσμάτων σε έναν παγκόσμιο χάρτημε την βοήθεια του google maps.