Τα πρώτα αποτελέσματα δείχνουν ότι ακόμη και τα ισχυρότερα μοντέλα ολοκληρώνουν μόνο περίπου το ένα τρίτο των δυσκολότερων εργασιών πολλών βημάτων, ενώ η Google έκανε νέα δωρεά 1 εκατ. δολαρίων ΗΠΑ στο ινστιτούτο.
Η εταιρεία τεχνολογίας NVIDIA και το Ινστιτούτο Πληροφορικής, Τεχνητής Νοημοσύνης και Τεχνολογίας (INSAIT) του Πανεπιστημίου της Σόφιας ανέπτυξαν πλατφόρμα με την ονομασία LADDER, που επιτρέπει στους ερευνητές να αξιολογούν και να συγκρίνουν πόσο καλά τα κορυφαία μοντέλα τεχνητής νοημοσύνης ελέγχουν ρομπότ που εκτελούν αλληλουχίες ενεργειών, όπως μετέδωσε το BTA στις 26 Οκτωβρίου, επικαλούμενο το υπουργείο Παιδείας και Επιστημών.
Το έργο ανήκει στον τομέα της Physical AI, όπου τα συστήματα τεχνητής νοημοσύνης δεν πρέπει μόνο να επεξεργάζονται πληροφορίες αλλά και να αλληλεπιδρούν με τον πραγματικό κόσμο. Η μετακίνηση ενός αντικειμένου είναι σχετικά εύκολη για ένα ρομπότ, αλλά όταν πρέπει να μετακινήσει διαδοχικά πολλά αντικείμενα, η πιθανότητα λαθών αυξάνεται σημαντικά, ανέφερε το υπουργείο. Η έρευνα του INSAIT στον τομέα αυτό τράβηξε την προσοχή της NVIDIA, η οποία συμμετείχε στην περαιτέρω ανάπτυξή της.
Τα πρώτα αποτελέσματα δείχνουν ότι ακόμη και τα πιο ισχυρά συστήματα απέχουν ακόμη πολύ από τον αξιόπιστο έλεγχο ρομπότ. Στα κορυφαία μοντέλα της κατάταξης περιλαμβάνονται τα GPT-6 Astra, Claude Opus 5.5 και Gemini 4 Argon, αλλά αποτυγχάνουν σε σημαντικό μέρος των εργασιών. Στις δυσκολότερες δοκιμές, με οκτώ έως δέκα διαδοχικές ενέργειες, ακόμη και τα καλύτερα μοντέλα πετυχαίνουν μόνο στο ένα τρίτο περίπου των προσπαθειών. Τα μοντέλα που σχεδιάστηκαν ειδικά για τον έλεγχο ρομπότ τα πηγαίνουν ακόμη χειρότερα: ένα από τα κορυφαία της κατηγορίας μπορεί να μετακινήσει ένα αντικείμενο, αλλά σχεδόν ποτέ δεν ολοκληρώνει πέντε ή περισσότερες διαδοχικές ενέργειες.
Η μελέτη επισημαίνει επίσης το κόστος χρήσης των ισχυρότερων μοντέλων. Για ορισμένα από αυτά, το μέσο κόστος επιτυχούς ολοκλήρωσης μίας εργασίας ξεπερνά τα 6 δολάρια ΗΠΑ, ενώ μια πλήρης αξιολόγηση με σχεδόν 2.000 προσπάθειες θα κόστιζε περίπου 8.000 δολάρια ΗΠΑ. Η πλατφόρμα είναι δημόσια και θα ενημερώνεται με αποτελέσματα νέων μοντέλων· η κατάταξη, τα βίντεο και η πλήρης επιστημονική εργασία είναι διαθέσιμα στο ladderrobotics.ai.
Στις 23 Οκτωβρίου η Google έκανε νέα δωρεά 1 εκατ. δολαρίων ΗΠΑ στο INSAIT, με την οποία η συνολική της στήριξη προς το ινστιτούτο ξεπέρασε τα 7 εκατ. δολάρια ΗΠΑ, ανέφερε το πανεπιστήμιο. Το INSAIT είναι μονάδα του Πανεπιστημίου της Σόφιας που ιδρύθηκε σε συνεργασία με το ETH Zurich και το EPFL της Ελβετίας.
Για τους επενδυτές που παρακολουθούν τον τεχνολογικό τομέα της Βουλγαρίας, η συνεργασία δείχνει ότι η έρευνα από τη Σόφια τροφοδοτεί το έργο μεγάλων διεθνών εταιρειών τεχνητής νοημοσύνης και προστίθεται στο ιστορικό του ινστιτούτου στην προσέλκυση διεθνούς χρηματοδότησης.