WWDC 2024 : les nouveautés IA des iPhone, iPad et Mac se précisent
Avec le concours de ©Walt Disney Company 😉
Lundi prochain à 19 h, heure française, commencera la keynote de la WWDC 2024 et nous connaîtrons enfin les nouveautés intégrées à iOS 18, iPadOS 18 et macOS 15 notamment. On savait déjà qu’une grande partie des annonces, si ce n’est la totalité, vont tourner autour de l’Intelligence Artificielle. C’est même le patron du marketing mondial d’Apple, Greg Jozwiak, qui l’a révélé à demi-mots sur X (ex-Twitter) le 26 mars dernier dans une publication annonçant les dates de la WWDC : «It’s going to be Absolutely Incredible» (Cela va être absolument incroyable) utilisant en anglais des mots commençant par A et I, comme AI, comme Artificial Intelligence.
WWDC 2024 : les fonctions de résumé intégrées à iOS 18 confirmées ?
Aujourd’hui 6 juin, le site Apple Insider (lire ici) cite une source proche interne chez Apple travaillant à l’amélioration de l’application Mail. Le projet, baptisé BlackPearl, a pour objet d’ajouter à l’application de messagerie électronique plusieurs fonctions basées sur l’IA. On y trouverait notamment plusieurs niveaux de résumés pour obtenir: - en deux ou trois mots les concepts clés d’un texte, - en 10 à 20 mots pour obtenir la même chose sous forme de phrases et - en un paragraphe de trois phrases et 60 mots maximum pour ne rien rater des points abordés.
Ces capacités seraient basées sur le modèle de langage « maison » baptisé Ajax, capable d’identifier et « comprendre » les informations clés dans un texte. On s’attend à ce que ce modèle de langage soit capable de fonctionner en local sur les iPhone les plus puissants, peut-être à partir de l’iPhone 15, donc sans avoir besoin d’être connecté à Internet. Pour les modèles précédents, certaines fonctions d’Intelligence Artificielle auront besoin du secours des serveurs d’Apple dédiés à ces fonctions et qui devraient également être annoncés à la WWDC.
WWDC 2024 : les autres fonctions d’IA attendues
Il y a peu de chances que les fonctions d’IA intégrées à nos iPhone, iPad et Mac s’arrêtent là, évidemment. Selon les dernières rumeurs, voici à quoi on peut s’attendre : - Toujours dans Mail, l’application serait capable de nous proposer des projets de réponses déjà rédigées, tenant compte du contenu du message reçu, mais aussi dépendant du correspondant et peut-être même des historiques des échanges. - Une conversation plus riche avec Siri : Ce n’est un secret pour personne que l’assistant vocal d’Apple déçoit depuis longtemps. On est loin des promesses du début qui permettait d’imaginer Siri comme un véritable compagnon dans nos actions du quotidien. Mais ces promesses seront peut-être enfin réalisées grâce à l’aide d’agents conversationnels comme ChatGPT et/ou Gemini. On sait en effet qu’Apple travaille depuis plusieurs mois à des accord aussi bien avec Open AI qu’avec Google pour intégrer tout ou partie de leur intelligence dans les appareils à la Pomme. - Des retouches photo plus intelligentes : cela fait plusieurs années maintenant que Google a intégré dans son application et service en ligne Photos la fonction Gomme Magique, par exemple, qui permet d’effacer d’une image un personnage ou objet indésirable de manière simple et rapide. Une fonction retouche, bien moins puissante, est aujourd’hui disponible dans l’application Photos de macOS, mais n’est toujours pas présente sur iPhone ou iPad. Cet « oubli » devrait être réparé dans iOS et iPadOS 18. En revanche, on croit moins à l’arrivée d’une fonction de création d’image permettant par exemple, comme l’a déjà montré Google également, d’ajouter de la matière autour d’une photo que l’on voudrait cadrer plus large.
WWDC 2024 : des emojis et des images à la sauce IA
Peut-être plus anecdotiques mais appréciées de très nombreux utilisateurs d’iPhone, les prochaines versions de système pour nos iPhone et iPad pourraient intégrer de nouvelles fonctions de création d’emoji personnalisées, basées sur l’IA. Peut-être par exemple pour créer des emoji à partir de photos, voire de portraits. On sait qu’en plus du modèle Ajax de traitement des textes, Apple travaille également sur un autre modèle, cette fois baptisé Ferret, capable d’analyser des images. Une des applications possibles est d’obtenir la description textuelle d’une image ou d’une zone d’image, ce qui permettrait peut-être à Apple de fournir aux utilisateurs d’iPhone une fonction de recherche visuelle similaire à Entourer pour chercher que l’on trouve sur Android.