Une app iOS qui classe automatiquement les captures d’écran avec le Foundation Model d’iOS 26

Présentation de ScreenshotAI
Quand je tombe sur des informations utiles, je prends souvent des captures d’écran presque automatiquement, mais je finis souvent par les laisser de côté sans jamais les organiser. J’ai développé une app iOS qui transforme ces captures d’écran en notes consultables grâce à l’IA.

https://apps.apple.com/kr/app/screenshotai-ai-notes/id6756419927

Étapes de traitement

• Extraction du texte des images à l’aide de la fonction OCR du framework Vision
• Si le texte a une longueur significative (10 caractères ou plus), génération d’une note avec le Foundation Model
• Les notes générées par le Foundation Model se composent de title, tags, summary, key insights et ai refined content

Stack technique

• SwiftUI
• Vision Framework
• Utilisation du Foundation Model on-device d’iOS 26
  • Possibilité d’utiliser un modèle OpenAI en enregistrant une clé API
• Intégration avec Core Spotlight pour permettre la recherche au niveau du système d’exploitation