Dopo averne preannunciato l’arrivo un anno fa, Microsoft ha iniziato a integrare l’intelligenza artificiale in Windows 11 in vista della prossima versione.
2 SETTEMBRE 2024 | Articolo aggiornato in fondo con ulteriori novità in arrivo su Windows 11 basate sull’intelligenza artificiale, come la ricerca all’interno di file audio e video e altro ancora.
Arriva l’AI in Windows 11
Dopo l’introduzione dei suggerimenti di Snap Layout basati sull’AI, Microsoft sta preparando la vera integrazione dell’intelligenza artificiale in Windows 11, vociferata a lungo in questi mesi e in arrivo con la prossima versione 24H2 attesa in autunno, e all’interno delle applicazioni di sistema. Dopo il lancio di Copilot anche in Windows 11 negli scorsi mesi, nell’ultima build 26052 ha iniziato a introdurre una serie di feature che utilizzeranno l’AI all’interno delle funzionalità del sistema operativo per migliorarne l’esperienza d’uso. In particolare, Microsoft sta lavorando per rendere Copilot più intelligente, in grado di compiere azioni utili oltre alla possibilità di fare ricerche. Nella prossima versione di Windows 11, Copilot sarà in grado di interagire con gli utenti tramite suggerimenti di azione, con un nuovo menu dedicato alle operazioni per riassumere, spiegare un testo o analizzare un’immagine.
There are 3 variants of the Copilot actions menu on hover experience in build 26052. The menu itself is the same across all of them, but there are two different icon animation variants.
There's this one which has a very nice (imo) animation when you copy text: pic.twitter.com/DPqFQ2dMOn
— phantomofearth 🌳 (@phantomofearth) February 8, 2024
L’obiettivo di Microsoft è rendere Copilot uno strumento sempre più indispensabile, in grado di cambiare l’uso del PC per eseguire operazioni che gli utenti non sono in grado nemmeno di fare ma che possono chiedere di eseguire all’intelligenza artificiale. Ma l’integrazione non riguarderà solo Copilot, Microsoft sta aggiungendo l’AI in altre parti del sistema operativo che si fonderanno al suo interno per migliorare alcune funzionalità. Ad esempio, è in arrivo un sintetizzatore vocale che sarà in grado di parlare usando la vostra voce leggendo il testo che digitiamo.
A new accessibility feature called "Speak for me" is in the works, which will let you "Type what you want to say and have it spoken aloud".
The settings page for it is hidden in build 26052, but no functionality seems to be present. pic.twitter.com/kCsViTAuHu
— phantomofearth 🌳 (@phantomofearth) February 8, 2024
Ma non è tutto, Microsoft sta lavorando anche a una funzionalità di upscaling denominata Automatic Super Resolution, simile a DLSS di NVIDIA, per migliorare la fluidità e la resa visiva dei giochi grazie all’impiego dell’intelligenza artificiale.
Version 24H2 will have an AI "Super Resolution" feature, as previous reports mentioned. Here are some settings for it in Graphics settings – a default toggle and per-app options. (26052) pic.twitter.com/fI9t4ksTWH
— phantomofearth 🌳 (@phantomofearth) February 10, 2024
Icona dedicata e nuovi effetti Windows Studio
Secondo altre indiscrezioni Microsoft starebbe lavorando al miglioramento di Windows Studio Effects. A questo proposito la prossima versione di Windows 11 24H2 dovrebbe avere un’icona dedicata sulla barra delle applicazioni.
A new Windows Studio Effects button could be coming soon to the system tray. (hidden in 22635.3276, feature name: WSESystrayIcon)
vivetool /enable /id:46107637 pic.twitter.com/rZ6iZEiRrN
— phantomofearth 🌳 (@phantomofearth) March 5, 2024
Sembrerebbe che Windows Studio Effects riceverà anche nuovi effetti per la webcam, come acquerello, cartoni animati e disegni che verranno aggiunti a quelli esistenti per migliorare le riprese dei video grazie all’utilizzo della NPU.
These are the AI powered "enhanced" Studio Effects I mentioned are coming in one of my recent articles. They look super cool
— Zac Bowden (@zacbowden) March 9, 2024
Integrazione Copilot nei menu di Esplora file
Secondo nuove indiscrezioni Microsoft ha iniziato a integrare Copilot all’interno di Esplora file. In particolare nell’ultima build 26080 distribuita nel canale Canary e Dev è stata avvistata la nuova voce Copilot all’interno dei menu contestuali che permetterà di inviare un file nella chat di Copilot o compiere altre azioni già note come riassumere o spiegare molto facilmente.
Here's how the Copilot entry in File Explorer context menus will appear. It will show some actions you can take for files using Copilot, like summarizing and describing text files. https://t.co/15KXTKcaBn pic.twitter.com/N6HhIB8pWk
— phantomofearth 🌳 (@phantomofearth) March 17, 2024
Integrazione Copilot nell’app Foto
Secondo un nuovo report Microsoft ha iniziato a integrare Copilot all’interno delle app di sistema. In particolare nell’ultima versione dell’app Foto è arrivato il supporto per il plugin di Copilot. Questa integrazione all’interno dell’app permette di compiere azioni come creare o visualizzare slideshow e impostare un’immagine di sfondo tramite nostra richiesta nella chat di Copilot.
The Microsoft Photos app is getting a Windows Copilot plugin, which is used for actions like creating/viewing slideshows and setting the desktop background. It's available with app version 2024.11030.22001.0. pic.twitter.com/WOyXRjrxaj
— phantomofearth 🌳 (@phantomofearth) March 28, 2024
AI Explorer
La più grande novità di Windows 11 24H2 in termini di integrazione dell’AI dovrebbe essere rappresentata da AI Explorer. Secondo i rumor la funzione AI Explorer potrebbe essere una sorta di Copilot avanzato, in grado di tenere traccia e capire le attività svolte sul PC per poter offrire risposte e suggerimenti su azioni, app e file all’interno delle ricerche. Ad esempio sarà possibile fare domande con linguaggio naturale e ricevere risposte intelligenti all’AI che andrà a cercare risposte all’interno di documenti, immagini, cronologia o conversazioni. L’AI sarà in grado anche di interagire con noi offrendo suggerimenti o azioni utili in base a ciò che stiamo guardando o facendo. Tra queste sono emersi alcuni riferimenti alla capacità di “capire lo schermo” e “catturare lo schermo“, ovvero tenere traccia di ciò che accade sul display e in grado di immagazzinare e analizzare per poter interagire con le informazioni contenute e poter rispondere a delle domande su di esse. Sono previste anche ulteriore capacità non chiare dietro il nome di Sidebar Island, Shoulder Tap, Intent Engine, Discovery Overlay e altre ancora.
Un altro aspetto non ancora chiarito è la possibile esclusività di AI Explorer per i nuovi AI PC con Snapdragon X Elite emersa tra i requisiti di Windows 11 24H2. A tal proposito sembrerebbe che si riceverà un messaggio che avvertirà in mancanza dei requisiti.
Managed to dump a list of objects that go into making 26200.5001's AI Explorer UI package, some of the names sound interesting ✨📦
Sidebar Island, Shoulder Tap (making a comeback), Screen Understanding, Intent Engine, Discovery Overlay, and many more 🤔💭https://t.co/iAvOhFsrMN— Albacore ☁️ (@thebookisclosed) April 22, 2024
Inoltre, è emerso che AI Explorer, al pari di Copilot, dovrebbe avere una vera e propria identità con un’icona dedicata simile proprio a quest’ultimo.
Here's the icon in all its colorful glory pic.twitter.com/JhPVB6rNMO
— Albacore ☁️ (@thebookisclosed) April 22, 2024
Stando a una nuova indiscrezione, la funzione AI Explorer dovrebbe girare localmente, senza appoggiarsi al cloud, ecco il perché di tali requisiti minimi. Proprio per questa caratteristica il tracciamento delle attività degli utenti sarà anche sicuro e a prova di privacy.
AI Explorer girerà costantemente in backgroud e sarà possibile interagire con esso nella parte alta dello schermo, con una sorta di campo di ricerca all’interno del quale sarà possibile fare delle richieste scritte sulle attività che abbiamo svolto sul PC. Oltre a questo, AI Explorer sarà anche in grado di svolgere attività, analizzando ciò che accade sullo schermo e suggerire delle azioni correlate.
Integrazione Chiedi a Copilot nelle Impostazioni
Secondo nuove indiscrezioni Microsoft si prepara a integrare Copilot all’interno delle Impostazioni di Windows 11. In particolare nell’ultima build 26212 distribuita nel canale Canary è stata avvistata la nuova voce Chiedi a Copilot all’interno delle Impostazioni che permetterà di chiedere aiuto a Copilot nel caso in cui non si ottengano risultati nel box di ricerca.
Another piece of new-ish functionality in Settings is the ability to ask Copilot ✨ for help in case the inbox database has no result for your query 🔍
In case you don't have the option yet and would like to use it, enable feature ID 49445394 pic.twitter.com/inK8AWVkNH— Albacore ☁️ (@thebookisclosed) May 9, 2024
Aggiornamento componenti AI
Non solo nuove funzioni basate sull’intelligenza artificiale, sembrerebbe che Microsoft stia lavorando ad un sistema per mantenerle aggiornate. Nell’ultima build 26217 sono comparse tracce di una nuova voce nelle impostazioni di Windows Update che permetterà di visualizzare gli aggiornamenti disponibili per le Componenti AI al pari degli aggiornamenti di sicurezza e degli altri.
A new section for AI component updates can now show up in Settings > Windows Update > Update history in build 26217. https://t.co/dZmG5qX6W8 pic.twitter.com/KqguZhwU8T
— phantomofearth 🌳 (@phantomofearth) May 15, 2024
Ricerca intelligente in audio e video
Secondo nuove indiscrezioni sembrerebbe che Microsoft stia lavorando anche ad un sistema di “ricerca intelligente dei media”. In altre parole grazie all’intelligenza artificiale sarebbe possibile effettuare delle ricerche di parole all’interno di file audio o video salvati nel PC. I file verrebbero prima scansionati, trascritti e poi indicizzati prima di poter effettuare la ricerca.
These changes may already exist in other branches but in 27695…
"Intelligent media search" references have been added
Intelligent media search available
Search by spoken words in your indexed video or audio files. By clicking 'I agree,' you consent to scanning the media files…— Xeno (@XenoPanther) August 30, 2024
C’è da dire che questa profonda integrazione dell’automatizzazione dell’AI potrebbe necessitare della presenza di una NPU dedicata, che abbiamo già visto sarà un requisito fondamentale dei prossimi AI PC in arrivo congiuntamente alla nuova versione dell’OS. Cosa ne pensate di queste feature intelligenti? L’AI cambierà veramente il modo in cui utilizziamo Windows? Scriveteci la vostra nei commenti.
Articolo di Windows Blog Italia