Utiliser Visual Intelligence sur Mac avec Siri

Découvrez comment Visual Intelligence analyse le contenu affiché sur un Mac pour répondre à des questions, repérer des événements, identifier des lieux et traduire du texte intégré à une image.

Détails de la leçon

Description de la leçon

Cette leçon présente Visual Intelligence sur Mac, une fonction qui permet à Siri d’examiner le contenu d’une fenêtre affichée à l’écran et de répondre à des questions à son sujet. Elle explique les conditions d’utilisation indiquées dans la vidéo : disposer d’un Mac compatible, notamment équipé d’une puce M ou d’un MacBook Neo, activer Siri AI et configurer le Mac et Siri dans la même langue. Deux raccourcis sont présentés : Majuscule + Commande + espace pour analyser la fenêtre au premier plan, et Majuscule + Commande + 6 pour sélectionner une zone précise. Ce second raccourci peut ne pas fonctionner dans tous les cas, la fonction étant encore récente.

À travers trois exemples, la vidéo montre comment exploiter les résultats. Sur une affiche de concert, Siri répond à une question précise sur l’horaire et le prix, puis propose d’ajouter au calendrier l’ouverture des portes ou le concert. Sur une photographie, il identifie le Golden Gate Bridge et fournit des sources à consulter. Enfin, face à une carte de café en portugais, l’outil traduit le texte directement sur l’image, avec une mise en garde sur les erreurs possibles concernant les noms propres ou les appellations de boissons.

La démonstration souligne l’intérêt de formuler des demandes précises, de poser des questions de suivi et de vérifier les informations importantes. Elle invite aussi à tenir compte de la confidentialité : lors de la première traduction, le Mac indique que le texte est transmis à Apple pour traitement.

Objectifs de cette leçon

À l’issue de la vidéo, l’apprenant pourra lancer Visual Intelligence avec le raccourci approprié, poser une question précise sur le contenu d’une fenêtre, transformer une date en événement de calendrier, identifier un monument à partir d’une photo et traduire le texte présent dans une image. Il saura également vérifier les sources et repérer les limites possibles des résultats.

Prérequis pour cette leçon

Il faut disposer d’un Mac compatible avec la fonction, activer Siri AI et utiliser la même langue pour Siri et le Mac. Une connaissance élémentaire des raccourcis clavier et la capacité à ouvrir une image ou un document sur le Mac sont utiles. La disponibilité exacte peut varier selon la configuration et l’évolution du service.

Métiers concernés

Ces fonctions peuvent faciliter le travail des assistants administratifs, qui extraient des dates et des coordonnées, des professionnels du tourisme et de l’accueil, qui identifient des lieux ou traduisent des menus, ainsi que des journalistes, chercheurs et créateurs de contenu qui analysent des documents visuels. Elles peuvent aussi soutenir les équipes événementielles dans la collecte d’informations figurant sur des affiches. Dans tous les cas, les résultats générés doivent être vérifiés avant un usage professionnel ou une diffusion.

Alternatives et ressources

Pour traduire du texte, il est possible d’utiliser une application de traduction comme Google Traduction ou DeepL, ou encore la reconnaissance de texte intégrée à certaines applications, puis de copier le texte dans le traducteur. Pour identifier un monument ou un objet, des outils de recherche visuelle tels que Google Lens peuvent constituer une solution complémentaire. Les événements peuvent être saisis manuellement dans Calendrier si la détection automatique est indisponible. Ces solutions ne reproduisent pas nécessairement l’intégration de Visual Intelligence à Siri.

Questions & Réponses

Le raccourci Majuscule + Commande + espace analyse la fenêtre au premier plan. Majuscule + Commande + 6 sert à sélectionner une zone précise de l’écran. La vidéo précise que ce dernier raccourci n’a pas réagi lors de la démonstration et que la fonction peut encore être instable.
Ouvrez l’affiche, lancez Visual Intelligence avec Majuscule + Commande + espace, puis choisissez l’action « Ajouter au calendrier ». Siri peut proposer plusieurs événements détectés, par exemple l’ouverture des portes et le concert. Il faut relire les informations et sélectionner l’événement souhaité avant de l’ajouter.
La fonction peut traduire le texte directement sur l’image, mais certains noms de boissons ou appellations risquent d’être traduits littéralement ou de manière incorrecte. Il est donc préférable de vérifier les termes importants. La vidéo indique également que, lors de la première traduction, le texte est envoyé à Apple pour être traduit.