Η MICROSOFT υπόσχεται ότι κάθε υπολογιστής με Windows 11 θα μετατραπεί σε AI PC μέσω νέου κύματος ενημερώσεων που θέτει το Copilot στο κέντρο της εμπειρίας χρήσης και μάλιστα βάζοντας τη φωνή του χρήστη στο επίκεντρο. Οι αλλαγές δεν περιορίζονται μόνο στα Copilot+ PCs, αλλά επεκτείνονται σε όλες τις συσκευές που τρέχουν το λειτουργικό σύστημα.
Ο Yusuf Mehdi, VP και Consumer Chief Marketing Officer της εταιρείας, ανακοίνωσε την άφιξη του Copilot Voice στα Windows 11, καθώς και την ευρύτερη παγκόσμια διάθεση του Copilot Vision. Η φωνητική λειτουργικότητα ενεργοποιείται με τη φράση "Hey Copilot", εμφανίζοντας το μικρόφωνο του Copilot στην οθόνη για να δεχτεί εντολές ή ερωτήσεις. Στη συνέχεια το AI είναι έτοιμο να απαντήσει στα ερωτήματα του χρήστη που μπορούν να περιλαμβάνουν επεξηγήσεις για κάτι που εμφανίζεται στην οθόνη του είτε στον browser είτε σε άλλη εφαρμογή. Λέγοντας "Goodbye" ή κλείνοντας το panel τερματίζεται αυτόματα η συνομιλία, με ηχητικά σήματα να επιβεβαιώνουν την έναρξη και τη λήξη κάθε συνεδρίας.
Οι χρήστες πρέπει να ενεργοποιήσουν τη λειτουργία φωνής μέσω των ρυθμίσεων της εφαρμογής Copilot στο desktop των Windows 11. Το Copilot Vision, που μέχρι τώρα ήταν διαθέσιμο μόνο στις ΗΠΑ, θα κυκλοφορήσει παγκοσμίως και αναλύει το περιεχόμενο της οθόνης παρέχοντας βοήθεια στη χρήση εφαρμογών, την εκτέλεση συγκεκριμένων εργασιών, την επίλυση προβλημάτων στο λειτουργικό ή συμβουλές σε παιχνίδια. Η συνεργασία Vision και Voice επιτρέπει φωνητικό έλεγχο όλων αυτών των λειτουργιών και μάλιστα στη γλώσσα του χρήστη αφού σταδιακά θα υποστηριχθούν οι περισσότερες γλώσσες που ήδη "μιλάει" το Copilot app.
Επίσης η taskbar των Windows 11 θα αποκτήσει πλαίσιο Ask Copilot με πρόσβαση ενός κλικ στο Copilot Voice και Vision μέσω των εικονιδίων τους (γυαλιά και μικρόφωνο). Υπόσχεται επίσης ταχύτερη και καλύτερη αναζήτηση στα Windows, χωρίς το Copilot να αποκτά πρόσβαση στα αρχεία των χρηστών.
Η λειτουργία των Copilot Actions, που προηγουμένως είχε παρουσιαστεί για το web επιτρέποντας στην τεχνητή νοημοσύνη να ολοκληρώνει online εργασίες όπως κρατήσεις ξενοδοχείων ή αγορά εισιτηρίων, έρχεται τώρα στα τοπικά αρχεία. Σε πειραματική λειτουργία μέσω του Copilot Labs, οι χρήστες θα μπορούν να αναθέτουν στην AI να ταξινομεί φωτογραφίες, να διαγράφει διπλότυπα ή να εξάγει συγκεκριμένες πληροφορίες από έγγραφα.
Και στην περίπτωση αυτή, οι χρήστες περιγράφουν φωνητικά ή γραπτά την εργασία και το AI agent την ολοκληρώνει αλληλεπιδρώντας με εφαρμογές desktop και web. Η MICROSOFT τονίζει ότι η πραγματική δοκιμή όλων αυτών των σεναρίων είναι κρίσιμη λόγω πιθανών λαθών της τεχνητής νοημοσύνης, ξεκινώντας με περιορισμένες περιπτώσεις χρήσης.
Η ασφάλεια αποτελεί βασική προτεραιότητα, με την εταιρεία να εφαρμόζει αρχές προστασίας κατά νέων απειλών όπως cross-prompt injection attacks. Το νέο γενικό AI agent Manus μπορεί να αντιμετωπίζει πολύπλοκες εργασίες, όπως τη δημιουργία ιστοσελίδας από έγγραφα και εικόνες σε φάκελο μέσω του File Explorer.
Περισσότεροι Copilot connectors θα συνδέουν υπηρεσίες όπως το Gmail με την εφαρμογή Copilot, επιτρέποντας ερωτήματα για ραντεβού καταχωρημένα στο GOOGLE. Τέλος η MICROSOFT αναφέρει ότι σύντομα η εφαρμογή του Copilot θα βοηθά και στη βελτιστοποίηση ρυθμίσεων του PC.
