Please use this identifier to cite or link to this item:
https://hdl.handle.net/20.500.14279/12813| Title: | Ευφυής επεξεργασία και ανάλυση δεδομένων μεγάλου όγκου : Συλλογή και επεξεργασία δεδομένων μεγάλης συχνότητας και εύρους σε πραγματικό χρόνο για τον εντοπισμό ανωμαλιών | Authors: | Βασιλείου, Χριστόφορος | Keywords: | Apache Spark;Ανάλυση Δεδομένων;Μεγάλα Δεδομένα;Spark Streaming;Ροή Δεδομένων;Pyspark;Επιχειρηματική Ευφυία;Αυτοκινητοβιομηχανία | Advisor: | Ανδρέου, Ανδρέας Σ. | Issue Date: | May-2018 | Department: | Department of Electrical Engineering, Computer Engineering and Informatics | Faculty: | Faculty of Engineering and Technology | Abstract: | Η εργασία επικεντρώνεται σε τρόπους συλλογής και ανάλυσης Μεγάλων Δεδομένων σε μια συνεχώς μεταβαλλόμενη εποχή, καθώς και την υποβοήθηση της διαδικασίας λήψης αποφάσεων βασισμένων στα δεδομένα. Η παραγωγή τεράστιου όγκου δεδομένων σε επιχειρησιακό επίπεδο αλλά και γενικότερα, οδήγησε στην ανάγκη αξιοποίησης αυτής της πληροφορίας. Απώτερος σκοπός της παρούσας εργασίας είναι η ανάδειξη της σημαντικότητας της χρήσης καινοτόμων τεχνολογιών για διαχείριση και ανάλυση μεγάλων όγκων δεδομένων και πώς μπορούν να συμβάλουν σε τομείς όπως της αυτοκινητοβιομηχανίας. Μελετήθηκαν περιπτώσεις ανάλυσης σε πληροφορίες πραγματικού χρόνου οι οποίες είχαν προέλευση την πλατφόρμα κοινωνικής δικτύωσης Twitter, αλλά και μεγάλων συνόλων δεδομένων από τομείς της αυτοκίνησης. Για την πραγματοποίηση των πειραμάτων χρησιμοποιήθηκε η καινοτόμα τεχνολογία του Apache Spark. Αποτελέσματα της έρευνας ήταν η σκιαγράφηση της επιρροής των επιμέρους τμημάτων των οχημάτων στη συνολική ομαλή τους λειτουργία. Τα ευρήματα αναδεικνύουν πως οι αναλυτικές τεχνικές που εφαρμόζονται στα Μεγάλα Δεδομένα της αυτοκίνησης, έχουν τεράστια αξία για την προγνωστική συντήρηση των οχημάτων, την αποσαφήνιση των σφαλμάτων, καθώς και των αιτιών που τα προκαλούν. Σε τελικό στάδιο της εργασίας, τα δεδομένα που επεξεργάστηκαν και αναλύθηκαν μετατράπηκαν σε κατάλληλη μορφή που να επιτρέπει τη γραφική τους απεικόνιση, η οποία αποτελεί διαφορετική πτυχιακή εργασία συμφοιτητή μου. Εν κατακλείδι, αποτυπώθηκαν τα πλεονεκτήματα της ύπαρξης μιας πλατφόρμας που θα προσφέρει υπηρεσίες “ Software as a service ” (SaaS) σε επιχειρήσεις και οργανισμούς παντός είδους. | Description: | The aim of this thesis is collecting and analysing Big Data in an era that is constantly changing. It is also very helpful to the process of taking decisions relying on the data. The huge production of data in business and other uses in general, has lead to the need of using and exploitating this information. The ulterior aim of this task is to produce and highlight the importance of using innovative technology to handle and analyse huge quantities of data and how this would be able to contribute to such sections as the car manufacture. Cases of analysing information of real time coming from social networking platforms such as Twitter have been studied. Datasets from automotive data have been also studied. The innovative Apache Spark technology has been used to carry out these experiments. The results of this research were sketching the role of the individual parts of the vehicles to their normal function in general. The foundings showed that the analytic technics applied in huge data of the automotive, are valuable for the predictive maintenance of the vehicles, the clarification of errors and the causes of them. As a conclusion of the thesis, the data that has been worked out and analyzed, has converted into a proper form that allows the graphical appearance that is another task taken by a fellow student. Finally, the advantages of the creation of a platform that will be able to provide services to business and other organizations have been imprinted. | URI: | https://hdl.handle.net/20.500.14279/12813 | Rights: | Απαγορεύεται η δημοσίευση ή αναπαραγωγή, ηλεκτρονική ή άλλη χωρίς τη γραπτή συγκατάθεση του δημιουργού και κάτοχου των πνευματικών δικαιωμάτων. | Type: | Bachelors Thesis | Affiliation: | Cyprus University of Technology |
| Appears in Collections: | Πτυχιακές Εργασίες/ Bachelor's Degree Theses |
Files in This Item:
| File | Description | Size | Format | |
|---|---|---|---|---|
| Abstract ChristoforosVasiliou.pdf | Περίληψη | 237.02 kB | Adobe PDF | View/Open |
CORE Recommender
Page view(s) 10
214
Last Week
0
0
Last month
5
5
checked on May 3, 2024
Download(s) 10
217
checked on May 3, 2024
Google ScholarTM
Check
Items in KTISIS are protected by copyright, with all rights reserved, unless otherwise indicated.