Το RapidMiner ως εργαλείο εφαρμογών Big Data Analytics

Abstract

Η ραγδαία αύξηση της τεχνολογίας και οι ρηξικέλευθες προτάσεις της Πληροφορικής Επιστήμης έχουν επιφέρει ριζικές αλλαγές στην καθημερινότητα και κυρίως στους διάφορους τομείς της επαγγελματικής μας δραστηριότητας. Η Αναλυτική Μεγάλων Δεδομένων (Big Data Analytics) καθώς και η Εξόρυξη Δεδομένων (Data Mining) προμηνύουν μία νέα Εποχή για την Ανθρωπότητα όπου η στατιστική επεξεργασία πληροφοριών με σκοπό την εξαγωγή ποιοτικών συμπερασμάτων αλλά και προβλέψεων θα αποτελεί στοιχείο απόλυτα συνυφασμένο με την επιχειρηματική δραστηριότητα, τη βιομηχανία, τη ναυτιλία, την ιατρική και γενικότερα με οιαδήποτε έκφανση του πολιτισμού μας. Αντικείμενο της παρούσας Διπλωματικής Εργασίας είναι η χρήση ενός open source Framework για την επεξεργασία Big Data. Στόχος μας, η δημιουργία ενός Μοντέλου Πρόβλεψης που θα χαρακτηρίζεται από μεγάλη ακρίβεια καθώς και η τοποθέτηση Συναγερμών ούτως ώστε να ειδοποιείται ο ενδιαφερόμενος σε περίπτωση που κάποια ή κάποιες απ’ τις μεταβλητές του εξεταζόμενου Συστήματος λάβουν τιμές εκτός των επιτρεπτών ορίων. Προς την επίτευξη των παραπάνω, επιλέχθηκε το λογισμικό περιβάλλον του RapidMiner, στο οποίο εισήχθη ένα Data Set υπό μορφή Excel από τις μετρήσεις που συλλέχθηκαν σε χρονικό διάστημα ενός χρόνου και οι οποίες αφορούν στη λειτουργία ενός Φωτοβολταϊκού Πάρκου. Η Διπλωματική Εργασία χωρίζεται ως εξής: Στο πρώτο Κεφάλαιο επιχειρείται μία θεωρητική εισαγωγή στη Σύγχρονη Πληροφορική (Data Analytics, Big Data, Data Mining, IoT, Cloud), στο δεύτερο παρατίθενται κάποιες προαπαιτούμενες γνώσεις που κρίνονται απαραίτητες για την εκτέλεση της Πειραματικής Διαδικασίας η οποία πραγματοποιείται στο τρίτο και τέταρτο Κεφάλαιο (όπου καλούμαστε να προβλέψουμε την Παραγόμενη Ισχύ βάσει της προσπίπτουσας Ακτινοβολίας, να θέσουμε κάποιους Συναγερμούς ως προς τη Θερμοκρασία, την Υγρασία και τον Άνεμο και να εκτιμήσουμε την κριτική ταινιών από ενδεχόμενους Users καθώς και τους πιο πιθανούς συνδυασμούς αγοράς προϊόντων σε supermarket), και τέλος στο πέμπτο Κεφάλαιο έχουν καταχωρηθεί κάποια γενικά Συμπεράσματα που προέκυψαν μέσω της Πειραματικής Διαδικασίας.