Apple dévoile son système d’IA générative, Apple Intelligence

Lors de son WWDC 2024, Apple a récemment annoncé le lancement de son système d’intelligence artificielle générative, Apple Intelligence, faisant ainsi une entrée fracassante sur le marché de l’IA. Cette nouvelle technologie révolutionnaire est intégrée aux appareils iPhone, iPad et Mac, offrant aux utilisateurs des fonctionnalités avancées et une expérience utilisateur améliorée.

En effet, Apple Intelligence combine des modèles génératifs puissants avec un contexte personnel pour fournir une intelligence incroyablement utile et pertinente. De plus, Apple a mis l’accent sur la protection de la vie privée en adoptant une approche innovante appelée Private Cloud Compute, qui garantit que les données des utilisateurs restent confidentielles et sécurisées avec la possibilité d’adapter la capacité de calcul entre le traitement sur l’appareil et des modèles plus grands basés sur serveur qui s’exécutent sur des serveurs Apple Silicon dédiés.

« Nous sommes ravis d’ouvrir un nouveau chapitre dans l’innovation Apple. Apple Intelligence va transformer ce que les utilisateurs peuvent faire avec nos produits — et ce que nos produits peuvent faire pour nos utilisateurs. Notre approche unique combine l’IA générative avec le contexte personnel de l’utilisateur pour fournir des informations vraiment utiles. Et il peut accéder à ces informations de manière totalement privée et sécurisée pour aider les utilisateurs à faire les choses qui comptent le plus pour eux. Il s’agit d’une IA telle que seul Apple peut la proposer, et nous avons hâte que les utilisateurs découvrent ce qu’elle peut faire. »

Tim Cook, PDG d’Apple

Les fonctionnalités clés de l’Apple Intelligence

Les fonctionnalités intégrées par la firme de Cupertino rassemblent des outils d’écriture, mais aussi des outils de personnalisation avancée par lesquels les utilisateurs peuvent s’approprier les différents appareils auxquels Apple Intelligence fera désormais partie intégrante et visible. Outre ces aspects, il s’agira également d’une nouvelle façon pour les utilisateurs d’améliorer leur écriture et de communiquer plus efficacement, quitte à créer un langage encore plus universel via toutes les applications des systèmes iOS 18, iPadOS 18, macOS Sequoia et visionOS 18.

1. Outils d’écriture améliorés

Apple Intelligence propose de nouveaux outils d’écriture intégrés à iOS 18, iPadOS 18 et macOS Sequoia. Les utilisateurs peuvent réécrire, relire et résumer du texte dans diverses applications telles que Mail, Notes et Pages.

Grâce par exemple à la fonction Rewrite, les utilisateurs ont la possibilité de choisir parmi différentes versions de ce qu’ils ont écrit, ajustées selon le ton auquel ils veulent s’adresser à leur public et la tâche à accomplir. De l’autre côté, Summarize aide les utilisateurs à restructurer leur texte sélectionné en paragraphe, en points clés à puces, en tableau ou en liste simple. Toujours dans le sillage des outils d’écriture améliorés, le système d’IA génératif Apple Intelligence comprend dans l’application Mail, l’outil Smart Reply qui identifie des questions dans un long e-mail, tout en y fournissant des suggestions de réponse rapide.

Et pour éviter de perdre le fil d’une activité, et dans le même temps, le fil d’un message important, Apple a intégré une fonction qui fait émerger les notifications prioritaires. Outre ceci, Réduire les interruptions aide à filtrer les notifications nécessitant une attention immédiate.

Quant aux Notes et Téléphone, Apple Intelligence offre la capacité aux utilisateurs d’enregistrer, de transcrire et de résumer un audio. Pour ce faire, l’IA Apple Intelligence prévient les participants d’un appel lorsqu’il lance un enregistrement, et une fois l’appel terminé, Apple Intelligence génère un résumé pour aider à rappeler les points clés.

2. Image Playground

Cette fonctionnalité permet aux utilisateurs de créer des images amusantes en quelques secondes via différents styles et concepts. Ils peuvent choisir parmi trois styles différents : Animation, Illustration ou Esquisse. Image Playground est intégré à des applications telles que Messages et est également disponible en tant qu’application dédiée. Pour générer leur concept préféré, les utilisateurs n’ont qu’à taper une description pour définir une image, puis choisir une personne de leur photothèque personnelle à inclure dans leur image et leur style préféré.

Apple Intelligence IA

Dans les messages par exemple, Image Playground peut fournir des suggestions de concepts liés à vos amis, votre destination ou votre activité selon ce dont est question votre conversation.

Dans Notes, Image Playground d’Apple Intelligence est accessible via nouvelle image Wand de la palette d’outils Apple Pencil, ce qui permet de transformer divers croquis en images attractive. Apple a également rendu cette fonction disponible sur Keynote, Freeform, Pages et des applications tierces qui adoptent la nouvelle API Image Playground.

3. Genmoji

Les utilisateurs peuvent créer des Genmojis originaux pour s’exprimer. Ils peuvent taper une description et leur Genmoji apparaîtra, offrant également des options supplémentaires. Les Genmojis peuvent être ajoutés aux messages ou partagés sous forme d’autocollants de réaction.

4. Recherche améliorée dans les photos et vidéos

Apple Intelligence permet une recherche plus pratique des photos et vidéos en utilisant le langage naturel. Les utilisateurs peuvent rechercher des photos spécifiques en utilisant des descriptions détaillées et trouver des moments spécifiques dans les vidéos.

Par ailleurs, les photos et les vidéos comportent l’outil Clean Up qui peut identifier et supprimer les objets et/ou personnes gênants en arrière-plan d’une photo sans altérer accidentellement le sujet.

L’outil Memories aide les utilisateurs à créer l’histoire qu’ils souhaitent voir en inscrivant simplement une description permettant à Apple Intelligence de sélectionner les meilleures photos et vidéos. L’IA crée ensuite un scénario approprié et organise tout dans un film avec son propre arc narratif et des suggestions de chansons depuis Apple Music.

Apple Intelligence IA

5. Siri amélioré

Siri, alimenté par Apple Intelligence, est désormais plus intégré au système et offre une compréhension linguistique plus riche. D’un point de vue visuel, l’assistant présente un tout nouveau design. En effet, une lumière brillante et élégante s’enroule autour du bord de l’écran lorsque ce dernier est actif.

siri amélioré 1

Ensuite, d’un point du vue fonctionnel, il peut suivre les demandes des utilisateurs, passer du texte à la voix et répondre à des milliers de questions sur les appareils Apple.

siri amélioré 2

Grâce à la reconnaissance à l’écran, Siri peut par exemple comprendre et agir avec le contenu des utilisateurs dans beaucoup d’applications au fil du temps. Il pourra ainsi accomplir des centaines de nouvelles tâches dans et entre les applications Apple et tierces, qu’elles soient de contexte différent ou non.

siri amélioré 3

L’assistant pourra aussi fournir des informations adaptées à l’utilisateur, peu importe leur localisation. Il pourra accomplir les tâches en fonction des informations collectées, hors ou dans l’appareil de l’utilisateur.

6. La confidentialité dans l’IA à un autre level avec l’Apple Intelligence

Comme soulevé dans l’introduction, Apple offre via à son système d’Intelligence artificielle, une compréhension approfondie, mais aussi une protection de la confidentialité des utilisateurs. Via le traitement sur l’appareil opéré par la fonction Private Cloud Compute, Apple Intelligence a la capacité de faire évoluer sa capacité de calcul suivant des données supposément « périssables » (les données des utilisateurs ne sont ni conservées, ni exposées).

Apple garantit par là la sureté des données grâce à un code crypté qui empêche l’iPhone, l’iPad et le Mac de communiquer avec un quelconque serveur, sauf si Apple enregistre publiquement le logiciel de Private Cloud Compute pour inspection.

7. Apple Intelligence comprend aussi ChatGPT

Enfin, dans l’ordre des fonctionnalités, Apple donne accès gratuitement à l’expérience ChatGPT sous iOS 18, iPadOS 18 et macOS Sequoia, alimenté par GPT-4o. Prévu pour plus tard cette année, les utilisateurs pourront y accéder sans créer de compte et les abonnés ChatGPT pourront connecter leurs comptes pour profiter des fonctionnalités payantes.

Sous le système d’IA Apple Intelligence, les chatbots et leurs diverses fonctions peuvent ainsi collaborer, permettant par ailleurs à Siri d’exploiter ChatGPT selon l’utilité.

ChatGPT est disponible pour les outils d’écriture à l’échelle du système Apple, et par conséquent à Apple Intelligence, aidant par exemple les utilisateurs à accéder à des outils d’image ChatGPT via la fonction Compose pour générer des images dans une grande variété de styles, voire du contenu pour tout ce sur quoi ils écrivent.


source