Le modèle sur lequel a travaillé Apple avec l’Université de Santa Barbara permet de recadrer, de redimensionner, de retourner et d'ajouter des filtres aux images.
Apple raccroche doucement le train de l’IA
Depuis un peu plus d’un an, la folie de l’IA s’est emparée de notre monde ! Avec les émergences remarquées de ChatGPT, de Bard, mais aussi des diverses IA génératrices d'images comme Midjourney, et Dall-E, il semble que l'engouement pour l'IA ne faiblisse pas. Récemment, nous avons notamment vu Samsung et Google en remettre une couche avec Android avec leurs smartphones équipées d’une multitude de fonctionnalités à base d’intelligence artificielle. En parlant des poids lourds de la Tech, Apple a quelque peu manqué le coche dans le domaine de l'intelligence artificielle. En fait, avec l'avènement de ChatGPT et autres, la pomme a dû revoir ses programmes pour développer sa propre solution en interne. Mais malheureusement pour eux, et si on en croit les spécialistes, Apple a un peu été pris de cours.
Pour autant, la firme de Cupertino ne compte pas abdiquer face à la concurrence. En effet, au cours d’une récente déclaration, Tim Cook, le PDG de la pomme, a expliqué : « Nous continuerons à investir dans ces technologies et dans d'autres qui façonneront l'avenir. Cela inclut l'intelligence artificielle, à laquelle nous continuons à consacrer énormément de temps et d'efforts, et nous sommes impatients de partager les détails de notre travail en cours dans ce domaine plus tard dans l'année. »
Des informations qui viennent corroborer celles de l’insider Mark Gurman, qui expliquait il y a quelques jours qu'iOS 18 laisserait la part belle à l’IA : « On m'a dit qu'en interne, le nouveau système d'exploitation était considéré comme l'une des plus grandes mises à jour d'iOS - sinon la plus grande - de l'histoire de l’entreprise. » Et si nous pensions devoir attendre la prochaine WWDC pour voir Apple distiller des produits à base d’IA, force est de constater que nous nous étions un peu fourvoyer.
Le premier modèle d’IA d’Apple
Nous ne savons encore presque rien d’iOS 18, mais en revanche, nous en savons déjà beaucoup plus sur MGIE, qui n’est autre que le premier modèle d’IA de la pomme. Ce dernier, développé en collaboration avec l'Université de Californie à Santa Barbara, permet de recadrer, redimensionner, retourner et appliquer des filtres aux photos uniquement à partir de consignes textuelles. Le MGIE, acronyme de MLLM-Guided Image Editing, est capable de s'attaquer à des tâches de retouche d'image simples ainsi qu'à des manipulations plus complexes, telles que la modification d'objets spécifiques pour leur donner une forme différente ou les rendre plus lumineux. Ce modèle repose sur deux piliers fondamentaux des modèles de langage multimodaux : l'interprétation des consignes de l'utilisateur et la capacité à visualiser les modifications requises.
Crédit photo : arxiv.org
L'utilisation du MGIE est d'une simplicité déconcertante : il suffit aux utilisateurs de taper ce qu'ils souhaitent modifier dans l'image. À titre d'exemple, pour rendre une pizza au pepperoni plus saine, il leur suffit de saisir la commande adéquate, et le modèle se charge d'ajouter des tomates et des légumes. De même, une photo de guépard paraissant sombre peut être instantanément éclaircie en demandant au modèle d'ajouter plus de contraste pour simuler plus de lumière. Pour ceux qui veulent tester tout ça, Apple a rendu le modèle MGIE disponible en téléchargement via GitHub et a également mis en place une démonstration web sur Hugging Face Spaces, comme le rapporte VentureBeat. Cependant, la société n'a pas encore précisé ses intentions quant à l'avenir de ce modèle, au-delà de la recherche.