Πλοήγηση ανά Συγγραφέας "Piperakis, Kyriakos"
Τώρα δείχνει 1 - 1 of 1
Αποτελέσματα ανά σελίδα
Επιλογές ταξινόμησης
Τεκμήριο Μετα-αξιολόγηση μεγάλων γλωσσικών μοντέλων-LLMS με την χρήση των μεθόδων AHP και FAHP.(ΕΛΜΕΠΑ, Σχολή Επιστημών Διοίκησης και Οικονομίας (ΣΕΔΟ), ΠΜΣ Διοίκηση και Ψηφιακός Μετασχηματισμός, 2025-06-08) Πιπεράκης, Κυριάκος; Piperakis, Kyriakos; Παπαδάκης, Στέλιος; Papadakis, SteliosΗ διάδοση και η χρήση των LLMs (Large Language Models-Μεγάλα Γλωσσικά Μοντέλα) σε πολλούς τομείς των επιστημών έχει κεντρίσει των ενδιαφέρον πολλών ερευνητών σχετικά με την απόδοση αυτών και την επιλογή των κατάλληλων μοντέλων ανάλογα με τις εφαρμογές που χρησιμοποιούνται. Στην παρούσα εργασία έγινε μέτρηση και εκτίμηση απόδοσης τριών γνωστών μεγάλων γλωσσικών μοντέλων (Phi, Mistral, Gemma) σύμφωνα με ερώτηση που έχει σχέση με την σύνταξη εντολής της γλώσσας προγραμματισμού Python ('What is the command to print output in Python?') και συγκεκριμένα με την εφαρμογή του Ollama framework (τοπική εκτέλεση LLMs) και την χρήση στατιστικών μεθόδων με την βοήθεια της γλώσσας προγραμματισμού Python . Οι μετρήσεις βασίζονται στον καθορισμό κριτηρίων απόδοσης των LLMs (π.χ. ακρίβεια, ταχύτητα εκτέλεσης κ.ά.) που στην συνέχεια με την χρήση των μεθόδων AHP (Analytical Hierarchy Process- Διαδικασία Αναλυτικής Ιεράρχησης) και FAHP (Fuzzy Analytical Hierarchy Process-Ασαφής Διαδικασία Αναλυτικής Ιεράρχησης) έγινε μετα- αξιολόγηση των μοντέλων με σκοπό την εύρεση του καταλληλότερου μοντέλου για το παράδειγμα μας. Οι μετρήσεις και με τις δύο μεθόδους έδειξαν παρόμοια αποτελέσματα με τα δύο μοντέλα (Phi, Mistral) να υπερτερούν σαφώς σε σχέση με το τρίτο Gemma). Η χρήση περισσότερων ερωτήσεων και περισσότερων κριτηρίων αλλά και ο έλεγχος παραπάνω LLMs μπορεί να αποτελέσει αντικείμενο συνέχειας της έρευνας μας.