Sans même attendre sa grande conférence annuelle, la Build, du 19 au 22 mai prochain, Microsoft multiplie les annonces autour de l'intelligence artificielle et de la façon dont cette dernière peut venir enrichir Windows sur les machines estampillées Copilot+.

Alors qu'il officialisait mardi ses nouveaux PC et tablettes Surface, l'éditeur a dévoilé une nouvelle salve de fonctionnalités et d'optimisations, qui seront déployées dans les semaines à venir auprès des usagers membres du programme Windows Insiders.

Dans le discours de Microsoft, on ne parle cependant pas de fonctionnalités, mais plutôt d'« expériences », dans le sens où l'IA est censée contribuer à rendre plus intuitive et plus naturelle l'utilisation d'un ordinateur.

Un agent pour les paramètres système

Témoin de cette ambition, un agent IA enrichira bientôt le champ de recherche des paramètres systèmes de Windows 11. En pratique, l'OS proposera à l'utilisateur d'exprimer sa demande sous forme de question en langage naturel, plutôt que de naviguer dans des menus d'options.

« Vous pourrez simplement décrire ce pour quoi vous avez besoin d'aide, comme "comment contrôler mon PC par la voix" ou "mon pointeur de souris est trop petit" et l'agent vous recommandera les bonnes mesures à prendre pour résoudre le problème », illustre Microsoft dans un billet d'annonce. L'éditeur précise qu'il sera possible de valider la proposition, et donc de déclencher le changement de paramètres, directement depuis cette conversation.

Cette fonctionnalité expérience sera d'abord réservée aux PC Copilot+ équipés d'un SnapDragon (architecture Arm), avant d'être déployée sur les machines équipées en Intel ou AMD, uniquement en anglais dans un premier temps.

De nouvelles interactions Click to Do

Fin avril, Microsoft avait déjà confirmé le retour de la controversée fonction Recall dans une version revue et corrigée. En parallèle de Recall, qui promet pour mémoire d'autoriser des recherches dans l'historique de l'utilisateur, toutes applications confondues, l'éditeur a également développé des optimisations dédiées à la recherche Windows, ainsi qu'un module de suggestion d'actions contextuelles surnommé Click to Do, accessible via les raccourcis Windows + clic ou Windows + Q.

Ce menu Click to Do devrait bientôt s'enrichir de nouvelles options, inspirées des fonctions d'IA générative intégrées aux outils bureautiques de l'offre Microsoft 365. En surlignant un texte, l'utilisateur se verra par exemple proposer la lecture à voix haute de l'extrait, l'affichage dans une interface optimisée ou la possibilité d'interroger l'IA Copilot. De la même façon, Click To Do permettra de créer automatiquement un rendez-vous à partir d'un mail, ou proposera d'envoyer le contenu sélectionné d'un tableau vers une feuille de calcul Excel. Ces différentes options sont soit déjà déployées, soit prévues dans la prochaine préversion de Windows 11 distribuée sur le canal Insiders.

Un zeste supplémentaire d'IA pour Photos, Paint et l'outil Capture

Les applications dédiées à l'image reçoivent elles aussi leur lot d'optimisations diverses, à commencer par Photos. Déjà dotée de capacités d'upscaling et de reconnaissance de caractères sur les PC Copilot+, elle inaugure de nouveaux contrôles en matière de gestion de l'éclairage de la scène et de l'intensité des couleurs.

L'application Paint propose quant à elle de générer automatiquement des « stickers » à partir d'une entrée de texte. Elle gagne par ailleurs la possibilité de détourer et donc d'isoler, pour le sélectionner, un élément d'une image.

L'outil Capture inaugure quant à lui un mode « perfect screenshot » censé comprendre quel est l'élément qui vous intéresse dans votre capture d'écran pour resserrer la sélection et vous éviter d'avoir à recadrer a posteriori. Il s'enrichit également d'un extracteur de texte, avec lequel il sera possible de copier du texte depuis une image, ainsi que d'une fonction « pipette » pour capturer la valeur exacte d'une couleur.

Des fonctions IA pour le reste des utilisateurs Windows 11

Si la plupart de ces nouveautés ont vocation à rester cantonnées aux machines estampillées Copilot+ (au moins pour l'instant), Microsoft évoque également l'introduction prochaine de quelques nouveautés sur les machines Windows 11 dépourvue d'un NPU. L'éditeur confirme les évolutions à venir du menu Démarrer et annonce le déploiement prochain pour les Windows Insiders de Copilot Vision (reconnaissance automatique des éléments affichés à l'écran, également distribué via le navigateur Edge).

Microsoft évoque enfin l'intégration d'« actions IA » à l'explorateur de fichiers, assez proches sur le principe de ce que promet Click to Do. Elles devraient par exemple permettre de demander la modification d'un fichier (édition d'une image par exemple) directement depuis l'interface de navigation, sans qu'il soit nécessaire d'ouvrir l'application concernée.