Παραγωγή κώδικα με τη χρήση μεγάλων γλωσσικών μοντέλων : από την αρχιτεκτονική transformer στην πράξη

Abstract

Η παρούσα εργασία εξετάζει τις σύγχρονες μεθόδους αυτόματης δημιουργίας λογισμικού με τη χρήση Τεχνητής Νοημοσύνης (AI), δίνοντας ιδιαίτερη έμφαση στα Μεγάλα Γλωσσικά Μοντέλα (LLMs) και την αρχιτεκτονική Transformer. Στόχος της αποτελεί η διερεύνηση των τεχνολογικών μεθόδων που διευκολύνουν την αυτόματη παραγωγή κώδικα, καθώς και η παράθεση των πλεονεκτημάτων, των προκλήσεων και των ενδεχόμενων κινδύνων που απορρέουν από την ανάπτυξη λογισμικού μέσω AI. Η μεθοδολογία εμπερικλείει την επισκόπηση των βασικών μηχανισμών του Transformer, την κατασκευή και εκπαίδευση μοντέλων LLM, καθώς και την αξιολόγηση της απόδοσής τους σε εργασίες συγγραφής κώδικα. Μέσα από την εξαγωγή των συμπερασμάτων, συνάγεται ότι η αξιοποίηση AI στη δημιουργία λογισμικού προσφέρει αυξημένη αποδοτικότητα, ακρίβεια και δυνατότητες αυτοματοποίησης, πλην όμως, απαιτεί προσεκτική διαχείριση των ανακυπτόμενων ηθικών και τεχνικών ζητημάτων και προβληματισμών.