Το OpenAI έχει κάνει ένα ακόμη βήμα στην ενσωμάτωση του τεχνητή νοημοσύνη με καθημερινή χρήση υπολογιστή ανανεώνοντας πλήρως το Codex, τον agent κώδικα για υπολογιστές. Το εργαλείο, που προηγουμένως ήταν γνωστό κυρίως για την υποβοήθηση προγραμματισμού του, τώρα γίνεται ένας βοηθός ικανός να χειρίζεται εφαρμογές, να θυμάται προτιμήσεις και να διαχειρίζεται έργα σχεδόν απρόσκοπτα.
Με αυτήν την ενημέρωση, η εταιρεία με επικεφαλής τον Sam Altman φέρνει πιο κοντά το σχέδιό της στη δημιουργία ενός Μια «σούπερ εφαρμογή» για υπολογιστές που ενοποιεί το ChatGPT, το Codex και το πρόγραμμα περιήγησης AtlasΗ κίνηση αυτή στοχεύει στην απλοποίηση της εμπειρίας χρήστη, στη συγκέντρωση πόρων σε έναν ενιαίο χώρο εργασίας και στην αντιμετώπιση ανταγωνιστών όπως η Anthropic, ειδικά στο περιβάλλον ανάπτυξης λογισμικού και στον προηγμένο αυτοματισμό.
Το Codex μαθαίνει να χρησιμοποιεί τον υπολογιστή όπως οποιοσδήποτε άλλος χρήστης
Μία από τις πιο εντυπωσιακές αλλαγές είναι ότι το Codex μπορεί πλέον έλεγχος του υπολογιστή στο παρασκήνιοΟ πράκτορας είναι σε θέση να βλέπει τι υπάρχει στην οθόνη, να μετακινεί τον κέρσορά του, να κάνει κλικ, να πληκτρολογεί κείμενο και να αντιδρά σε ό,τι συμβαίνει στις εγκατεστημένες εφαρμογές, χωρίς να διακόπτει την εκτέλεση της εργασίας του χρήστη με το ποντίκι ή το πληκτρολόγιο.
Αυτή η δυνατότητα επιτρέπει σε πολλούς πράκτορες του Codex να συνεργάζονται παράλληλα στην ίδια ομάδαΑυτό περιλαμβάνει την εκτέλεση δοκιμών, την αλλαγή ρυθμίσεων ή την εκτέλεση επαναλαμβανόμενων εργασιών ενώ το άτομο συνεχίζει τις κανονικές του δραστηριότητες. Αυτό ανοίγει την πόρτα στην αυτοματοποίηση ροών εργασίας που προηγουμένως απαιτούσαν συνεχή επίβλεψη, όπως η δοκιμή μιας εφαρμογής μετά από κάθε αλλαγή κώδικα ή η επανάληψη ενεργειών διεπαφής.
Το OpenAI προτείνει αυτήν τη λειτουργία ως έναν τρόπο λειτουργίας του βοηθού εργαλεία που δεν διαθέτουν API ή άμεσες ενσωματώσεις, κάτι συνηθισμένο σε πολλά προγράμματα για υπολογιστές. Το Codex, «βλέποντας» την οθόνη και ελέγχοντας τον κέρσορα, μπορεί να αλληλεπιδράσει με αυτές τις εφαρμογές όπως ακριβώς θα έκανε ένας άνθρωπος χρήστης, αν και προς το παρόν με ελεγχόμενο τρόπο και με ιδιαίτερη προσοχή στην ασφάλεια.
Σύμφωνα με την εταιρεία, η χρήση υπολογιστή είναι αρχικά διαθέσιμη σε macOS μέσω της εφαρμογής Codex για υπολογιστές, συνδεδεμένο με έναν λογαριασμό ChatGPT. Η έκδοση για Windows θα κυκλοφορήσει αργότερα, αφού ελεγχθεί η απόδοση και προσαρμοστούν οι λειτουργίες στο περιβάλλον της Microsoft.
Στην περίπτωση της Ευρώπης και του Ηνωμένου Βασιλείου, η OpenAI επιβεβαίωσε ότι η έλεγχος από υπολογιστή, προηγμένη προσαρμογή, προτάσεις περιβάλλοντος και μνήμη Θα ενεργοποιηθούν αργότερα. Ο λόγος είναι η ανάγκη προσαρμογής αυτών των λειτουργιών στους κανονισμούς προστασίας δεδομένων, μια ιδιαίτερα απαιτητική απαίτηση στην Ευρωπαϊκή Ένωση και τη βρετανική αγορά.
Ενσωματωμένο πρόγραμμα περιήγησης και άμεση εργασία σε ιστοσελίδες
Η ενημέρωση ενισχύει επίσης τη σχέση της Codex με τον ιστό χάρη σε ένα ενσωματωμένο πρόγραμμα περιήγησης στην ίδια την εφαρμογήΑντί να λαμβάνει απλώς γενικές οδηγίες κειμένου, ο πράκτορας μπορεί να λαμβάνει εντολές απευθείας σε συγκεκριμένα στοιχεία μιας σελίδας.
Στην ανάπτυξη frontend, για παράδειγμα, ο χρήστης μπορεί Επιλέξτε ένα στοιχείο ιστού και περιγράψτε την αλλαγή. Ο χρήστης θέλει να κάνει κάτι (όπως να αλλάξει το χρώμα, το μέγεθος κειμένου ή τη διάταξη ενός μπλοκ) και το Codex κατανοεί τις οδηγίες μέσα σε αυτό το συγκεκριμένο οπτικό πλαίσιο. Αυτό αποφεύγει την ανάγκη να γράφετε μακροσκελείς οδηγίες που εξηγούν ποιο μέρος του ιστότοπου πρέπει να τροποποιηθεί.
Αυτό το ενσωματωμένο πρόγραμμα περιήγησης επιτρέπει επίσης το Codex Ανάλυση περιεχομένου, συλλογή πληροφοριών και χρήση του ως συμφραζόμενου Για άλλες εργασίες, όπως η τεκμηρίωση κώδικα, η αναθεώρηση των προδιαγραφών προϊόντων ή η σύγκριση τεχνικής τεκμηρίωσης, όλα γίνονται στο ίδιο περιβάλλον, χωρίς να χρειάζεται εναλλαγή μεταξύ πολλαπλών παραθύρων λειτουργικού συστήματος.
Δημιουργία και επεξεργασία εικόνων με το gpt-image-1.5
Ένας άλλος πυλώνας της νέας έκδοσης του Codex είναι η ενσωμάτωση του μοντέλου gpt-image-1.5 για δημιουργία και τροποποίηση εικόνων Μέσα από την ίδια την εφαρμογή για υπολογιστές, ο πράκτορας μπορεί να δημιουργήσει γραφήματα, διαγράμματα, μακέτες ή οπτικά σκίτσα από κείμενο ή συνδυάζοντας οδηγίες με στιγμιότυπα οθόνης και αποσπάσματα κώδικα.
Αυτή η δυνατότητα απευθύνεται άμεσα στις ομάδες που εργάζονται σε σχεδιασμός προϊόντων, διεπαφές χρήστη ή πρωτότυπα βιντεοπαιχνιδιώνΓια παράδειγμα, ένας προγραμματιστής μπορεί να καταγράψει ένα στιγμιότυπο οθόνης μιας ημιτελούς διεπαφής, να ζητήσει από την Codex να προτείνει έναν επανασχεδιασμό μενού ή ένα νέο συνδυασμό χρωμάτων και να δημιουργήσει εικόνες που ταιριάζουν σε αυτό το πλαίσιο, χωρίς να αλλάξει εργαλεία.
Με όλα συγκεντρωμένα στο Codex, οι πράκτορες μπορούν αλυσιδωτή σύνδεση εργασιών κωδικοποίησης και σχεδιασμού: γράψτε τη λογική μιας λειτουργικότητας, ενημερώστε το αντίστοιχο frontend και δημιουργήστε ένα οπτικό mockup για να το παρουσιάσετε στην ομάδα, χωρίς να εγκαταλείψετε τη ροή εργασίας ή να χρειαστεί να ανοίξετε εξωτερικές εφαρμογές επεξεργασίας γραφικών.
Μνήμη, περιβάλλον και μακροπρόθεσμος αυτοματισμός εργασιών
Πέρα από τον έλεγχο μέσω υπολογιστή και την παραγωγή εικόνων, το μεγάλο στοίχημα της OpenAI με αυτήν την έκδοση είναι να εξοπλίσει το Codex με ένα επίμονη μνήμη και πολύ ευρύτερη διαχείριση πλαισίουΤο εργαλείο μπορεί να επαναχρησιμοποιήσει προηγούμενες συνομιλίες, να διατηρήσει σημαντικές πληροφορίες και να τις ανακτήσει όταν χρειάζεται για να συνεχίσει ένα έργο.
Η λειτουργία μνήμης, η οποία κυκλοφορεί σε προεπισκόπηση, επιτρέπει στο Codex θυμούνται προσωπικές προτιμήσεις, συχνές διορθώσεις ή δεδομένα που ήταν δύσκολο να συλλεχθούνΑυτό περιλαμβάνει τα πάντα, από την τυπική στοίβα τεχνολογίας μιας ομάδας μέχρι τον τρόπο οργάνωσης των φακέλων, τις πιο συχνά χρησιμοποιούμενες μορφές αναφοράς και την ετικέτα που χρησιμοποιείται συνήθως στο GitHub για συγκεκριμένους τύπους προβλημάτων.
Με αυτό το συσσωρευμένο πλαίσιο, ο πράκτορας μπορεί προτείνετε προληπτικά εργασίεςΑυτό μπορεί να χρησιμοποιηθεί για να προτείνει την επανέναρξη ενός ημιτελούς έργου, να προτείνει την εκκρεμή αναδιάρθρωση ή να ειδοποιήσει τους χρήστες σχετικά με μακροχρόνια αιτήματα έλξης. Ορισμένες εταιρείες το χρησιμοποιούν ήδη για την παρακολούθηση συνομιλιών στο Slack, το Gmail ή το Notion και να αντιδρούν όταν συμβαίνουν ορισμένα συμβάντα.
Ο Κώδικας μπορεί επίσης να σχεδιάστε την εργασία σας για το μέλλον και επανενεργοποιήστε τον εαυτό σας ανεξάρτητα για την ολοκλήρωση μακροπρόθεσμων εργασιών. Για παράδειγμα, μπορεί να διαχειριστεί μια ουρά κριτικών κώδικα για ημέρες ή εβδομάδες, αντιμετωπίζοντας σχόλια και ενημερώνοντας την τεκμηρίωση χωρίς ο προγραμματιστής να χρειάζεται να την παρακολουθεί συνεχώς.
Πάνω από 90 πρόσθετα και βελτιωμένη υποστήριξη για προγραμματιστές
Για να ολοκληρωθεί η αλλαγή, η OpenAI έχει προσθέσει σχεδόν 90 νέα πρόσθετα του CodexΑυτές περιλαμβάνουν ενσωματώσεις με το Microsoft Suite, το GitLab Issues, το Neon by Databricks, το Render και το Superpowers, καθώς και υποστήριξη για διακομιστές MCP (Model Context Protocol). Στόχος είναι να δοθούν στον πράκτορα περισσότερες πηγές περιβάλλοντος και μεγαλύτερες λειτουργικές δυνατότητες.
Χάρη σε αυτά τα πρόσθετα, το Codex μπορεί συλλέγουν πληροφορίες από διαφορετικές υπηρεσίες και ενεργούν βάσει αυτών Από έναν μόνο χώρο εργασίας, μπορείτε να εξετάσετε προβλήματα στο GitLab, να υποβάλετε ερωτήματα σε δεδομένα σε ένα περιβάλλον Databricks, να ενημερώσετε έγγραφα του Office ή να αλληλεπιδράσετε με υπηρεσίες ανάπτυξης, χωρίς να αναγκάσετε τον χρήστη να μεταβεί από πλατφόρμα σε πλατφόρμα.
Σε καθαρά τεχνικό επίπεδο, η ενημέρωση ενισχύει την τυπικές ροές εργασίας προγραμματιστώνΤώρα, το Codex σάς βοηθά να ελέγχετε αιτήματα έλξης, να διαχειρίζεστε πολλαπλές καρτέλες τερματικού ταυτόχρονα, να συνδέεστε σε απομακρυσμένα περιβάλλοντα ανάπτυξης μέσω SSH και να ανοίγετε αρχεία με πλούσιες προεπισκοπήσεις, είτε πρόκειται για PDF, υπολογιστικά φύλλα, παρουσιάσεις είτε για έγγραφα σε άλλες μορφές.
Όλα αυτά συγκεντρώνονται σε μια ενοποιημένη εμπειρία που, σύμφωνα με την ίδια την OpenAI, επιτρέπει ταχύτερη πρόοδο. σε όλα τα στάδια του κύκλου ζωής του λογισμικούΑπό τη σύνταξη του αρχικού κώδικα έως τη δοκιμή, την ανάπτυξη, την τεκμηρίωση και τη συντήρησή του, με τους πράκτορες τεχνητής νοημοσύνης να συνεργάζονται συνεχώς στο ίδιο περιβάλλον επιφάνειας εργασίας.
Διαθεσιμότητα, εστίαση σε προγραμματιστές και κατάσταση στην Ευρώπη
Η νέα έκδοση του Codex έχει ήδη αναπτυχθεί στο εφαρμογή για υπολογιστές για macOS Για όσους συνδέονται με λογαριασμό ChatGPT. Δεν απαιτούν όλες οι λειτουργίες τον ίδιο τύπο συνδρομής και ορισμένες προηγμένες λειτουργίες ενδέχεται να εξαρτώνται από το πρόγραμμα που έχετε αγοράσει, όπως συμβαίνει με άλλα εργαλεία OpenAI.
Ο Thibault Sottiaux, διευθυντής του Codex, εξήγησε ότι αυτή η ενημέρωση Απευθύνεται ειδικά σε προγραμματιστέςΑν και η πρόθεση είναι να επεκταθεί σε ένα ευρύτερο κοινό αργότερα. Η ιδέα είναι ότι οι τεχνικές ομάδες θα είναι οι πρώτες που θα επωφεληθούν από τους νέους πράκτορες και τις αυτοματοποιημένες ροές εργασίας και, με την πάροδο του χρόνου, θα μεταφέρουν αυτό το μοντέλο σε εργασίες γραφείου, διαχείριση εγγράφων ή προσωπική παραγωγικότητα.
Το OpenAI δίνει έμφαση στη χρήση υπολογιστικής ισχύος και μνήμης με προσέγγιση ασφάλειας και κανονιστικής συμμόρφωσηςΑυτό είναι ιδιαίτερα σημαντικό στην Ευρωπαϊκή Ένωση και το Ηνωμένο Βασίλειο. Για αυτόν τον λόγο, οι προηγμένες λειτουργίες προσαρμογής, οι προτάσεις με βάση τα συμφραζόμενα, η μόνιμη μνήμη και ο άμεσος έλεγχος του λειτουργικού συστήματος θα χρειαστούν λίγο περισσότερο χρόνο για να καταστούν διαθέσιμες σε αυτές τις αγορές.
Σε κάθε περίπτωση, η εταιρεία υποστηρίζει ότι αυτή η εξέλιξη του Codex ανοίγει την πόρτα σε ένα υπερ-εφαρμογή για υπολογιστές που επικεντρώνεται στον έξυπνο αυτοματισμόόπου οι πράκτορες τεχνητής νοημοσύνης όχι μόνο βοηθούν στη σύνταξη κώδικα, αλλά και συντονίζουν εργασίες, προσαρμόζονται στο στυλ εργασίας του χρήστη και διατηρούν σε λειτουργία πολύπλοκα έργα για μεγάλα χρονικά διαστήματα. Για τους προγραμματιστές λογισμικού στην Ευρώπη, το μήνυμα είναι σαφές: έρχονται νέες δυνατότητες, αλλά με τις απαραίτητες προσαρμογές ώστε να εντάσσονται στο υπάρχον κανονιστικό πλαίσιο.