Συγκριτική μελέτη Apache Hadoop με Apache spark για την επεξεργασία μεγάλων δεδομένων.

Απλή σελίδα τεκμηρίου
dc.contributor.authorΔημητριάδης, Πρόδρομοςel
dc.date.accessioned2021-07-12T09:32:26Z
dc.date.available2021-07-12T09:32:26Z
dc.date.issued2021-07-12
dc.identifier.urihttps://olympias.lib.uoi.gr/jspui/handle/teiep/12991
dc.rightsΑναφορά Δημιουργού-Μη Εμπορική Χρήση-Όχι Παράγωγα Έργα 3.0 Ελλάδα*
dc.rights.urihttp://creativecommons.org/licenses/by-nc-nd/3.0/gr/*
dc.subjectΣυστάδα υπολογιστώνel
dc.subjectΜηχανική εκμάθησηel
dc.subjectΑνάλυση βαθμολογίαςel
dc.subjectΣύσταση ταινιώνel
dc.titleΣυγκριτική μελέτη Apache Hadoop με Apache spark για την επεξεργασία μεγάλων δεδομένων.el
heal.abstractΚατά τη διάρκεια της πτυχιακή εργασίας αναλύθηκαν τα εργαλεία Apache Hadoop και Apache Spark και δημιουργήθηκαν οι εγκαταστάσεις τους για single-node και multi-node μορφή. Για τη multi-node μορφή δημιουργήθηκε μία συστάδα υπολογιστών, όπου αποτελείται από 5 υπολογιστές, σε ένα από τα εργαστήρια του τμήματος Πληροφορικής και Τηλεπικοινωνιών του Πανεπιστημίου Ιωαννίνων στην Άρτα. Με τη χρήση των εργαλείων Apache Hadoop και Apache Spark, καθώς και τις βιβλιοθήκες τους για μηχανική εκμάθηση Apache Mahout και MLlib, αλλά και το Hadoop Streaming, δημιουργήθηκαν τρεις εφαρμογές. Συγκεκριμένα, μία εφαρμογή σύστασης ταινιών με τη χρήση Mahout με δεδομένα χρήστες, ταινίες, αξιολογήσεις και χρονική σήμανση, και ένα παράδειγμα με τη χρήση Hadoop Streaming για ανάλυση βαθμολογίας ταινιών με δεδομένα χρήστες, ταινίες, αξιολογήσεις και χρονική σήμανση. Τέλος, δημιουργήθηκε ακόμα μία εφαρμογή σύστασης ταινιών με δεδομένα ταινίες και κριτικές διάφορων χρηστών με τη χρήση MLlib, Collaborative Filtering και ALS (Alternating Least Squares).el
heal.abstractDuring of my thesis, the Apache Hadoop and Apache Spark tools were analyzed and their installations for single-node and multi-node format were created. For the multi-node format, a cluster consisting of 5 computers was created, in one of the laboratories of the Department of Informatics and Telecommunications of the University of Ioannina in Arta. Using the Apache Hadoop and Apache Spark tools, as well as their Apache Mahout and MLlib machine learning libraries, as well as Hadoop Streaming, three applications were designed. Specifically, a movie recommendation system app using Mahout with user data, movies, ratings, and timestamps, and an example using Hadoop Streaming for movie ratings breakdown with user data, movies, ratings, and timestamps. Last, another movie recommendation system app for movies and reviews of various users was designed using MLlib, Collaborative Filtering and ALS (Alternating Least Squares).el
heal.academicPublisherΤ.Ε.Ι. Ηπείρου, Σχολή Τεχνολογικών Εφαρμογών, Τμήμα Μηχανικών Πληροφορικής Τ.Ε.el
heal.academicPublisherIDteiep
heal.accessfree
heal.advisorNameΓκόγκος, Χρήστοςel
heal.bibliographicCitationΔημητριάδης, Π., 2021. Συγκριτική μελέτη Apache Hadoop με Apache spark για την επεξεργασία μεγάλων δεδομένων. Πτυχιακή εργασία. Άρτα: Τ.Ε.Ι. Ηπείρου. Σχολή Τεχνολογικών Εφαρμογών. Τμήμα Μηχανικών Πληροφορικής Τ.Ε.el
heal.classificationΔεδομένα, Δομή των (Επιστήμη των υπολογιστών)el
heal.committeeMemberNameΣτύλιος, Χρυσόστομοςel
heal.committeeMemberNameΤζάλας, Αλέξανδροςel
heal.dateAvailable2024-01-11T21:44:29Z
heal.fullTextAvailabilitytrue
heal.identifier.secondaryΠτυχιακή Εργασία
heal.languageel
heal.numberOfPages100
heal.publicationDate2021
heal.recordProviderΤ.Ε.Ι. Ηπείρουel
heal.typebachelorThesis

Αρχεία

Πρωτότυπος φάκελος/πακέτο

Προβολή: 1 - 1 of 1
Μικρογραφία εικόνας
Ονομα:
Dimitriadis,P._TMP_2021.pdf
Μέγεθος:
6.25 MB
Μορφότυπο:
Adobe Portable Document Format
Περιγραφή:
Κατεβάστε

Φάκελος/Πακέτο αδειών

Προβολή: 1 - 1 of 1
Μικρογραφία εικόνας
Ονομα:
license.txt
Μέγεθος:
3.54 KB
Μορφότυπο:
Item-specific license agreed upon to submission
Περιγραφή:
Κατεβάστε

Συλλογές

Προπτυχιακές εργασίες Τμ. Μηχανικών Πληροφορικής Τ.Ε.