A Cupertino, rien de nouveau. Ou si peu : les principales caractéristiques de l’IA contextuelle vue par Apple étaient déjà connues (lire Qant du 10 juin, du 27 mai et du 26 avril). La longue, très longue vidéo d’ouverture n’a fait qu’en confirmer les grandes options et la réaction des investisseurs n’a pas tardé. Le cours de Bourse a clos la journée en recul de 1,9 %.
Si la Pomme tient parole et la tech succède cet automne à l’hyperbole, en revanche, Apple maintiendra son rang face aux AI PC soutenus par Microsoft et tous les AI-phones, Samsung S24 en tête (lire Qant du 21 mai pour Microsoft et du 18 janvier pour Samsung). Les petits modèles d’Apple seront embarqués dans les téléphones, les tablettes et les ordinateurs de la firme. Ils auront accès à l’intégralité des données générées par l’utilisateur. Cela leur permettra de proposer une IA contextuelle – ce que Microsoft appelle un Copilot – et de nourrir un nouvel agent multimodal présenté sous l’ancien nom de Siri.
Dans les cas, sans doute fréquents, où les besoins de calcul dépasseront les capacités de l’appareil, ils seront effectués sur des serveurs d’Apple, avec des puces d’Apple, dans un cloud sécurisé aux couleurs de la Pomme. Avec le consentement de l’utilisateur, un appel à ChatGPT pourra être lancé, sans que les données envoyées ne soient conservées par OpenAI pour l’entraînement de nouveaux modèles. Les comptes ChatGPT Plus, avec leurs fonctionnalités supplémentaires, seront intégrés. Quelle que soit la solution technique retenue, cela implique sans doute une explosion du nombre d’utilisateurs de ChatGPT et un paiement substantiel d’Apple à OpenAI, et donc à Microsoft pour les calculs.
Une intelligence Made in Apple
Concrètement, Apple Intelligence percole dans les principales plateformes d’Apple : iOS 18 pour les smartphones, MacOS Sequoia pour les ordinateurs, iPadOS 18 pour les tablettes, et même VisionOS 2 pour le casque de réalité virtuelle. Il permet notamment de générer des images et de résumer des textes. Un algorithme détermine si le traitement doit être effectué localement ou sur le cloud d'Apple. Il sera disponible gratuitement pour les utilisateurs d'iPhone 15 Pro – à partir de 8 Go de RAM, donc – et pour ceux disposant d'iPad et de Mac équipés de la puce M1 et ultérieurs.
Apple Intelligence transforme l’assistant Siri en un agent d’IA, qui pourra interagir de manière plus profonde avec les applications. Siri pourra, notamment, accéder à des informations spécifiques quelles que soient les applications qui les ont générées – mails, SMS, notes, photos…. L’intégration de ChatGPT lui permettra d’accéder à GPT-4o, après avoir obtenu l'autorisation de l'utilisateur (lire Qant du 14 mai). Cette fonctionnalité sera gratuite et ne nécessitera pas l’ouverture d’un compte.
De l’IA des mails au téléphone…
D’une plateforme à l’autre, les diverses applications bénéficieront de l’omniprésence de l’IA. Dans Mail, les utilisateurs pourront résumer des emails et générer des réponses, mais aussi hiérarchiser la recherche et les alertes. Le navigateur Safari bénéficiera d’une nouvelle fonctionnalité appelée Highlights, utilisant l’IA pour mettre en évidence les parties intéressantes d'une page web.
L’application Photos, quant à elle, bénéficiera de nouvelles capacités de recherche en langage naturel et d’une fonctionnalité de nettoyage des objets en arrière-plan, semblable à la Gomme Magique de Google.
Les Notes et l'application Téléphone disposeront de transcriptions et de résumés générés par l'IA. Watch OS permettra des traductions écrites de phrases orales mais Apple ne pousse pas, comme Samsung, jusqu’à promettre l'interprétariat en temps réel.
L'iPadOS 18 bénéficiera pleinement des capacités de reconnaissance d’écriture manuscrite par l’IA, en intégrant notamment la calculatrice et la prise de notes pour faciliter les calculs mathématiques et scientifiques.
Même Apple TV prend un coup de jeune
iOS 18 apportera également de nouvelles options de personnalisation, avec un Centre de Contrôle plus modulable et la possibilité de verrouiller certaines applications. Parmi les autres changements notables, on compte la prise en charge des RCS, la possibilité de programmer des messages sur iMessage, et de nouvelles options de personnalisation des Tapbacks. L’IA permettra aussi de générer des emojis personnalisés, les “genmojis”.
Apple TV Plus introduit une fonctionnalité appelée "inSights" qui permet de voir les acteurs et les personnages à l’écran en balayant simplement la télécommande. De plus, l'application Apple TV affichera automatiquement les sous-titres lorsque le son est coupé et supportera les projecteurs au format 21:9. Apple a également présenté une nouvelle application de gestion des mots de passe, permettant aux utilisateurs de stocker et de générer des mots de passe sur divers appareils, y compris iOS, iPadOS, macOS, visionOS, et même Windows.
Mac, iPhone et Vision Pro font peau neuve
La mise à jour macOS Sequoia permettra de refléter l'écran de l'iPhone sur un Mac, offrant la possibilité d'interagir directement avec l’iPhone depuis le Mac. watchOS 11 introduira de nouvelles fonctionnalités comme l’ajout automatique de widgets en fonction des besoins de l’utilisateur, une nouvelle application Vitals pour suivre les principaux indicateurs de santé, et des fonctionnalités de suivi en direct via Check In.
Enfin, la version 2 de visionOS, le système d'exploitation du Vision Pro, ajoutera des photos spatiales et un affichage Mac virtuel ultra-large, ainsi que des gestes plus intuitifs et un mode de voyage pour les trains. L’Apple Vision Pro sera bientôt disponible dans de nouveaux pays, dont la France.
Pour en savoir plus :