Une révolution silencieuse dans vos automatisations
Pas besoin d’attendre Apple Intelligence pour profiter de l’intelligence artificielle dans vos raccourcis. Des alternatives à Apple Intelligence existent déjà, souvent plus puissantes et accessibles que ce que la Pomme propose. Car pendant qu’Apple peaufine ses fonctionnalités IA, d’autres modèles offrent une liberté totale pour intégrer l’intelligence artificielle dans l’iPhone via nos raccourcis, Shortcuts et automatisations.
Pourquoi intégrer l’IA dans vos raccourcis Siri ?
L’intelligence artificielle rend vos automatisations adaptatives. Au lieu de prévoir tous les cas de figure à l’avance, vous laissez l’IA gérer l’imprévu et s’adapter aux contextes variables.
Prenons un exemple concret que vous vivez probablement chaque mois : la gestion de vos dépenses bancaires. Pour faciliter le suivi des dépenses, créons un raccourci qui utilise la photo d’un reçu de carte bancaire pour alimenter une feuille de calcul Numbers.
Reçu CB
Prendre 1 photo avec la caméra Arrière
Extraire le texte de Photo
L’approche classique : un casse-tête technique
Avec l’approche traditionnelle des Raccourcis Siri, vous devez programmer minutieusement chaque cas. Pour extraire le montant du reçu, vous créez des expressions régulières complexes qui cherchent des motifs spécifiques comme « € », « EUR » ou des formats numériques particuliers. Vous anticipez les variations de mise en forme, les espaces, les virgules décimales qui peuvent parfois être des points… Un travail fastidieux qui ne couvre jamais tous les cas.
L’approche IA : simplicité et efficacité
L’approche intelligence artificielle renverse cette logique. Votre raccourci capture une photo du reçu, extrait le texte par OCR, puis demande simplement à l’IA d’analyser ce contenu brut. Un prompt bien formulé suffit.
Voici le contenu d'un reçu de carte bancaire. Isole la date de la transaction, le nom du commerce et le montant. Le montant doit être fourni sous forme numérique à deux décimales avec une virgule et non un point, sans notion de la devise. Fournis la réponse sous la forme 'jj/mm/aaaa;nom;montant' à l'exclusion de tout autre élément.L’IA comprend le contexte, interprète les informations même mal formatées, et structure sa réponse selon vos besoins. Cette adaptabilité fonctionne avec tous les formats de reçus, dans toutes les langues, sans programmation supplémentaire. Elle pourra vous fournir un format JSON pour intégration dans votre app de gestion financière ou CSV pour Excel. Et si vous utilisez Numbers pour faire vos comptes, sachez que Raccoucis sait nativement ajouter une ligne à une feuille de calcul du tableur d’Apple.
Deux approches pour intégrer l’IA dans vos Raccourcis
L’intégration de l’intelligence artificielle dans l’iPhone suit deux philosophies distinctes. La première exploite la puissance des grands modèles de langage hébergés sur internet comme ChatGPT, Claude, Perplexity ou Gemini. Ces solutions offrent une intelligence remarquable et une compréhension fine du langage naturel. Elles excellent dans les tâches complexes nécessitant du raisonnement, de la créativité ou une connaissance étendue du monde.
La seconde approche mise sur l’autonomie et la confidentialité en s’appuyant sur des modèles exécutés localement, directement sur votre Mac, iPhone ou iPad. Ces traitements se font sans envoi de données vers des serveurs externes, ce qui promet une protection maximale de la vie privée. C’est ce que propose Apple Intelligence avec ses modèles embarqués, bien que certaines requêtes plus complexes puissent être redirigées vers l’infrastructure Private Cloud Compute d’Apple, toujours sous contrôle strict de la confidentialité. ChatGPT, quant à lui, n’intervient que si Apple Intelligence ne peut répondre, et uniquement avec votre consentement explicite. Dans ce cas, la requête est anonymisée avant d’être transmise à OpenAI, qui s’engage à ne pas l’utiliser pour entraîner ses modèles. En revanche, si vous utilisez un compte ChatGPT, cette anonymisation ne s’applique plus, car vous acceptez alors de partager votre identité avec le service.
L’IA en ligne : puissance et flexibilité maximales
L’impressionnante base de connaissance des modèles distants comme ChatGPT ou Claude est incontournable quand vous avez besoin d’un raisonnement avancé.
Exemple concret : planification intelligente
Imaginons que vous souhaitiez créer un raccourci de planification intelligente, une espèce de super-agenda. Vous lui donnez un objectif simple comme « Ma voiture doit être prête pour un long trajet le 8 juillet ». Le raccourci transmet cette information à ChatGPT (ou autre) avec un prompt demandant d’établir une checklist détaillée et datée des tâches à accomplir.
L’IA analyse votre demande et génère automatiquement un planning complet : vérification des niveaux d’huile et de liquides, contrôle de l’usure des pneus, révision des freins, contrôle technique si nécessaire, nettoyage intérieur et extérieur. Elle organise même ces tâches par priorité en fonction de vos contraintes et estime le temps nécessaire pour chacune. Votre raccourci récupère cette réponse, la formate proprement et l’ajoute directement dans votre app de gestion de tâches ou de calendrier préférée.
Cette approche révèle toute sa puissance dans les contextes variables. Le même raccourci pourrait gérer « Préparer un dîner pour 8 personnes samedi prochain » en générant une liste de courses, un planning de préparation et des suggestions de menus adaptées.
Les contraintes des services en ligne
Cependant, les IA en ligne présentent quelques limites. La latence réseau peut ralentir vos automatisations, particulièrement gênante si votre raccourci fait partie d’un workflow critique, et vous n’êtes pas à l’abri d’une déconnexion intempestive, ou d’une demande d’authentification. La dépendance à une connexion internet peut aussi poser problème dans certaines situations, sans parler de la nécessité de passer à un abonnement payant si l’on atteint les limites d’usage.
La structuration des réponses pose également des défis techniques. Les IA en ligne adorent contextualiser leurs réponses avec des formules de politesse, des explications préliminaires ou des suggestions bonus. Votre raccourci doit filtrer ces éléments parasites pour extraire uniquement les informations utiles. Cela nécessite un prompt précis et restrictif. Et encore, certaines IA n’en font qu’à leur tête…
L’IA locale : confidentialité et vitesse constante
Les modèles embarqués offrent une approche radicalement différente. L’app Enclave, par exemple, héberge un (ou plusieurs) modèle de langage complet directement sur votre iPhone. Toutes vos interactions restent privées, aucune donnée ne transite par internet.
Les avantages uniques du local
Autre avantage : les temps de réponse sont fixes, sans dépendance aux conditions réseau. Vous pouvez utiliser votre raccourci partout, même en mode avion ou dans une zone sans couverture.
La vitesse constante des modèles locaux convient parfaitement aux automatisations fréquentes. Si vous traitez plusieurs reçus par jour, l’expérience reste fluide sans attentes frustrantes. Cette prévisibilité facilite aussi l’intégration dans des workflows complexes où le timing compte.
Les limites des modèles embarqués
Cependant, les modèles embarqués sacrifient de la sophistication pour tenir dans la mémoire limitée de votre appareil. Leurs réponses peuvent manquer de nuance ou présenter des interprétations approximatives. Ils excellent dans les tâches simples et structurées mais peuvent peiner sur des demandes complexes nécessitant un raisonnement élaboré.
Applications recommandées pour l’IA en ligne
ChatGPT : le choix par défaut
L’application ChatGPT reste mon premier choix pour intégrer l’intelligence artificielle dans l’iPhone via les Raccourcis. Sa fiabilité et sa compatibilité native avec l’app Raccourcis en font un outil de référence. Attention cependant, les réponses peuvent rester obstinément mal formatées. Dans ces cas, il faut modifier le prompt ou changer de modèle, et surtout inspecter la réponse sur la version web de ChatGPT.
J’ai noté d’expérience qu’un modèle « tout terrain » rapide et robuste comme le GPT-4o est le mieux indiqué, notamment parce qu’il minimise le risque de timeouts.
Claude : l’excellence conversationnelle
L’application Claude fonctionne de la même façon, mais propose une approche plus conversationnelle, particulièrement efficace pour l’analyse de documents ou les tâches créatives. Son style de réponse plus naturel peut parfois compliquer l’extraction d’informations structurées, mais sa compréhension contextuelle reste remarquable.
Perplexity : l’information actualisée
Perplexity se distingue par sa capacité à rechercher des informations actualisées, parfait pour des Raccourcis nécessitant des données fraîches comme les cours de bourse, la météo détaillée ou l’actualité spécialisée.
Ces trois applications ont l’avantage de ne pas présenter de surcoût dans la mesure où elles utilisent votre abonnement à chacun des modèles de langage. Autrement dit, chaque application vous permet d’utiliser le service dans les mêmes conditions que votre abonnement, que vous payiez ou non un forfait.
Le cas des clés API : économique mais technique
Une autre option existe, moins onéreuse que l’abonnement mensuel mais également moins simple à déployer : utiliser l’API de l’intelligence artificielle. Pour cela, il vous faudra obtenir une clé API pour le modèle de langage que vous voulez utiliser, et la créditer d’une somme modeste qui sera ponctionnée à mesure de son utilisation.
Le prix est très faible au point que, pour des tâches fixes récurrentes (écriture de documents formatés, extraction de données), il peut être particulièrement rentable d’utiliser cette technique.
Les défis techniques des API
Cependant, il faut pour cela se frotter au code et surtout interpréter la réponse fournie par l’IA, en utilisant notamment l’instruction « obtenir le contenu de l’URL », toujours un peu sensible à paramétrer.
AI Actions : simplifier les appels d’API
Heureusement, il existe des extensions de Raccourcis qui permettent d’interroger différentes IA, en simplifiant au maximum l’appel d’API. AI Actions est le précurseur, issu de l’une des premières « Extensions » de Siri Shortcuts : Actions.
Cette app propose plusieurs actions clés :
Action OpenAI
- Modèles supportés : o1, GPT-4o, GPT-3.5 Turbo
- Attention : Le modèle o1 coûte beaucoup plus cher que les autres
- Enrichissement : Possibilité d’ajouter des images aux prompts
- Limite : 25 secondes maximum sur iOS pour les actions tierces
Conseil : Pour obtenir des données structurées, terminez votre prompt par : « Retourne le résultat sous la forme d’un objet JSON. N’inclus aucun autre texte que l’objet JSON » puis utilisez l’action « Obtenir le dictionnaire de l’entrée ».
Action Claude
- Capacités étendues : Support des images et PDFs
- Modèles disponibles : De Claude 3 à Claude 3.5 Sonnet
- Paramètres ajustables : Tokens de sortie (défaut: 4096), température (0-1)
- Astuce : Température proche de 0 pour l’analytique, proche de 1 pour la créativité
Action DALLE 3
- Génération d’images à partir de prompts textuels
- Qualité HD : Détails plus fins et cohérence améliorée
- Styles : Vivid (hyperréaliste) ou Natural (plus naturel)
LLM Toolkit : l’alternative moderne
LLM Toolkit est une application plus récente qui facilite également les appels API. Elle propose d’interroger facilement :
- OpenAI : ChatGPT 3.5 Turbo à o1 Mini
- Anthropic : Claude 3 Opus à Claude 3.5 Sonnet
- Google : Gemini 1.5 Flash à Gemini 2.0 Flash
L’avantage : elle permet d’appliquer un prompt par défaut et de limiter le nombre de tokens de sortie pour un contrôle plus fin.
Intelligence artificielle embarquée pour iPhone
Enclave : la référence actuelle
Du côté des solutions locales, Enclave est la référence du moment pour faire tourner gratuitement des modèles de langage directement sur votre iPhone ou iPad. Les modèles disponibles sont efficaces, même en français. Cependant des tests préalables sont indispensables, pour éviter toute mauvaise surprise, comme avec Llama, qui avait presque tout juste dans notre projet de Raccourci de suivi de dépenses… à part la date !
Avantages d’Enclave :
- Interface parfaitement intégrée avec l’app Raccourcis
- Qualité des réponses supérieure aux concurrents
- Mises à jour régulières des modèles
- Bon équilibre performance/consommation énergétique
PrivateLLM : le précurseur
PrivateLLM fut le précurseur des solutions embarquées. Bien qu’ayant ouvert la voie, cette application présente quelques limitations en termes de fluidité et de choix de modèles disponibles. Elle bénéficie d’une communauté forte, soutenue par un serveur Discord. Pour le prix unique de 9,90 euros, vous obtenez les versions iPhone/iPad et macOS de l’application, cette dernière permettant d’accéder à des modèles plus volumineux en exploitant la puissance du Mac. Malheureusement les modèles sont assez peu convaincants en dépit de l’excellente conception de l’application qui, notamment, active le mode Jeu d’iOS/iPadOS pour optimiser ses performances.
Pourquoi ne pas attendre Apple Intelligence ?
Apple Intelligence traîne des pieds et ses démonstrations publiques peinent à convaincre. Et puis, elle restera exclusive aux appareils les plus récents :
- iPhone : 15 Pro, 16 et suivants
- iPad : Équipés de puces M1 minimum + iPad Mini 7e génération
Cette limitation matérielle exclut des millions d’utilisateurs possédant des appareils parfaitement fonctionnels.
La liberté des alternatives
En utilisant des modèles locaux, libres et non censurés pour certains, vous n’êtes pas limité aux cas d’usage prévus par Apple. Cette flexibilité encourage l’innovation et permet de découvrir des utilisations inattendues de l’intelligence artificielle.
Commencer dès maintenant
L’intégration de l’IA dans vos raccourcis ne nécessite aucune compétence technique particulière. Commencez par identifier une tâche répétitive qui vous fait perdre du temps actuellement. Réfléchissez aux informations variables que vous traitez manuellement à chaque fois puis validez le concept avec un modèle en ligne gratuit.
L’IA accessible aujourd’hui
Quelle que soit la solution que vous retiendrez, l’IA embarquée dans nos Shortcuts démocratise la création d’outils sophistiqués et nous permet de repenser nos workflows quotidiens. Plutôt que d’attendre qu’Apple Intelligence arrive enfin, ces alternatives offrent dès maintenant une puissance et une flexibilité imparable pour nos raccourcis.
