Un prototype qui utilise l’AR et le ML pour prendre sur téléphone la photo d’un objet, en supprimer l’arrière-plan, puis l’insérer immédiatement dans un document affiché sur l’écran de l’ordinateur vu par la caméra
L’intégralité du code source est disponible sur GitHub
Application mobile : React Native
Serveur local : interface entre l’application mobile et Photoshop. OpenCV + Python
→ Avec Screenpoint, détection de la position du moniteur vue par la caméra du smartphone
→ Pour l’instant, la reconnaissance d’objet passe par un serveur BASNet séparé. Il serait aussi possible d’utiliser DeepLab de TensorFlow Lite dans l’application
1 commentaires
Les performances en AR et en ML des smartphones ne cessent de s’améliorer, donc ce type d’interface va probablement se multiplier.
GitHub : https://github.com/cyrildiagne/ar-cutpaste