Η Anthropic προτείνει έναν νέο τρόπο μέτρησης της εξέλιξης της frontier τεχνητής νοημοσύνης. Σε ανακοίνωση της 17ης Σεπτεμβρίου, η εταιρεία υποστήριξε ότι οι εξωτερικοί παρατηρητές δεν βλέπουν αρκετά από όσα συμβαίνουν στα κορυφαία εργαστήρια AI και πρότεινε τη δημοσίευση συγκρίσιμων δεικτών.
Τι θέλει να μετρήσει η πρόταση
Η πρόταση καλύπτει τρεις άξονες: τη συμμετοχή της AI στην έρευνα και ανάπτυξη AI, την εποπτεία των agents μέσα στην εταιρεία και την κατανομή υπολογιστικών πόρων. Η Anthropic παρουσιάζει εσωτερικές μετρήσεις και εξετάζει πώς θα μπορούσαν να επαληθεύονται συγκρίσιμα στοιχεία.
Η πρόταση αφορά τη διαφάνεια, όχι την ιδέα ότι ένας δείκτης μπορεί να συνοψίσει ένα σύστημα AI. Οι προϋπολογισμοί εκπαίδευσης, τα αποτελέσματα αξιολόγησης και οι επιλογές ανάπτυξης αποκαλύπτουν διαφορετικές πλευρές. Η σύγκριση δυσκολεύει επίσης όταν τα εργαστήρια χρησιμοποιούν διαφορετικές δοκιμές ή κρατούν τις μεθόδους τους ιδιωτικές.
Γιατί έχει σημασία η διαφάνεια
Η Anthropic λέει ότι καλύτερες μετρήσεις θα μπορούσαν να βοηθήσουν ερευνητές, policymakers και το κοινό να καταλάβουν αν η πρόοδος επιταχύνεται, σταθεροποιείται ή αλλάζει κατεύθυνση. Θα μπορούσαν επίσης να κάνουν τη συζήτηση για την ασφάλεια και τη διακυβέρνηση λιγότερο εξαρτημένη από περιστασιακές ανακοινώσεις προϊόντων.
Η δική μας εκτίμηση: η πρόταση θα είναι χρήσιμη μόνο αν ο κλάδος συμφωνήσει σε ορισμούς και δημοσιεύσει αρκετά στοιχεία ώστε τα αποτελέσματα να ελέγχονται. Οι εθελοντικοί δείκτες είναι μια αρχή, αλλά ανεξάρτητοι έλεγχοι και συνεπής αναφορά θα κρίνουν αν μπορούν να γίνουν σταθερό δημόσιο σήμα.
Η πλήρης πρόταση και η μεθοδολογία της βρίσκονται στον παρακάτω σύνδεσμο.
Διόρθωση, 21 Σεπτεμβρίου 2026: Διορθώσαμε την περιγραφή των τριών προτεινόμενων μετρήσεων.
