Apple annonce de nouvelles fonctionnalités d’accessibilité, dont le suivi oculaire, les retours haptiques musicaux et les raccourcis vocaux

• Présentation de nouvelles fonctionnalités d’accessibilité dont la sortie est prévue au second semestre de cette année
  • Suivi oculaire : permet aux utilisateurs ayant un handicap moteur de contrôler l’iPad et l’iPhone avec les yeux
  • Retours haptiques musicaux : permet aux utilisateurs sourds ou malentendants de ressentir la musique via le Taptic Engine
  • Raccourcis vocaux : permet d’exécuter des actions à l’aide de sons personnalisés
  • Repères de mouvement en véhicule : réduit le mal des transports lors de l’utilisation d’un iPhone ou d’un iPad en déplacement
  • visionOS : plusieurs fonctionnalités d’accessibilité seront ajoutées

Le suivi oculaire arrive sur iPad et iPhone

• Grâce à l’IA, une option intégrée permettra aux utilisateurs de naviguer sur iPad et iPhone avec les yeux.
• La configuration et l’étalonnage se font via la caméra frontale, et toutes les données restent protégées sur l’appareil.
• Aucun matériel ou accessoire supplémentaire n’est nécessaire.
• Les utilisateurs peuvent parcourir les éléments des apps avec les yeux et activer chacun d’eux à l’aide de Dwell Control.

Les retours haptiques musicaux rendent la musique plus accessible

• Une nouvelle manière pour les utilisateurs malentendants de ressentir la musique sur iPhone.
• Le Taptic Engine reproduit des tapotements, des textures et des vibrations raffinées synchronisés avec l’audio de la musique.
• Fonctionne avec des millions de morceaux du catalogue Apple Music, et sera également proposé sous forme d’API pour aider les développeurs à rendre la musique plus accessible dans leurs apps.

De nouvelles fonctionnalités pour une meilleure reconnaissance de la parole

• Vocal Shortcuts : Siri peut comprendre des prononciations personnalisées pour lancer des raccourcis et exécuter des tâches complexes.
• Listen for Atypical Speech : propose une option pour améliorer la reconnaissance de différents types de parole.
• Utilise le machine learning embarqué sur l’appareil pour reconnaître les schémas vocaux des utilisateurs.
• Conçu pour les utilisateurs dont la parole est affectée par des troubles comme la paralysie cérébrale, la SLA ou un AVC.

Réduction du mal des transports avec Vehicle Motion Cues

• Propose une nouvelle expérience pour réduire le mal des transports lors de l’utilisation d’un iPhone ou d’un iPad en véhicule.
• Des points animés sur les bords de l’écran indiquent les changements de mouvement du véhicule afin de réduire les conflits sensoriels.
• Utilise les capteurs intégrés de l’iPhone et de l’iPad pour détecter si l’utilisateur est en déplacement et réagir en conséquence.
• Peut s’afficher automatiquement dans le Centre de contrôle, ou être activé et désactivé manuellement.

Contrôle vocal dans CarPlay et autres mises à jour d’accessibilité

• Voice Control : permet de naviguer et de contrôler CarPlay et les apps à la voix uniquement.
• Sound Recognition : permet aux conducteurs ou passagers malentendants de recevoir des alertes pour les klaxons et les sirènes.
• Color Filters : rend l’interface de CarPlay plus facile à utiliser visuellement pour les personnes daltoniennes.

Ajout de fonctionnalités d’accessibilité à visionOS

• Live Captions : permet de suivre les conversations en direct et les dialogues audio issus des apps.
• FaceTime : permet de se connecter et de collaborer plus facilement à l’aide de Persona.
• Reduce Transparency, Smart Invert, Dim Flashing Lights : ajoutés pour les utilisateurs malvoyants ou ceux qui souhaitent éviter les lumières vives et les clignotements fréquents.

Mises à jour supplémentaires

• VoiceOver : nouvelles voix, Voice Rotor plus flexible, contrôle du volume personnalisé et personnalisation possible des raccourcis clavier VoiceOver sur Mac.
• Magnifier : nouvelle option pour lancer facilement Reader Mode et Detection Mode.
• Braille Screen Input : nouvelle méthode pour un contrôle plus rapide et l’édition de texte.
• Hover Typing : affiche un texte plus grand dans les champs de texte, avec la police et les couleurs préférées par l’utilisateur.
• Personal Voice : disponible en mandarin chinois, avec la possibilité de créer une voix personnelle à partir de courtes phrases pour les utilisateurs ayant des difficultés à prononcer ou lire des phrases complètes.
• Live Speech : comprend des catégories et la compatibilité simultanée avec Live Captions.
• Virtual Trackpad : ajoute un trackpad virtuel pour AssistiveTouch.
• Switch Control : peut reconnaître les gestes de tapotement des doigts comme des commutateurs à l’aide de la caméra de l’iPhone et de l’iPad.
• Voice Control : prise en charge d’un vocabulaire personnalisé et de mots complexes.

À l’occasion de la Journée mondiale de sensibilisation à l’accessibilité

• Pendant tout le mois de mai, des sessions gratuites seront organisées dans certains Apple Store pour aider les clients à découvrir les fonctionnalités d’accessibilité intégrées aux produits.
• Shortcuts : ajout de Calming Sounds pour aider les utilisateurs à se concentrer ou à se reposer.
• App Store : permet de découvrir des apps et jeux remarquables qui favorisent l’accessibilité et l’inclusion.
• Apple TV app : met à l’honneur des créateurs, artistes et militants qui partagent l’expérience du handicap ; le thème de cette année est « Refaire le monde ».
• Apple Books : met en lumière l’expérience du handicap à travers des récits à la première personne d’auteurs en situation de handicap.
• Apple Fitness+ : propose des entraînements, méditations et conseils de coach accueillant les utilisateurs malentendants, avec la langue des signes américaine.

L’avis de GN⁺

1. Importance des fonctionnalités d’accessibilité : les nouvelles fonctionnalités d’accessibilité d’Apple renforcent l’inclusivité de la technologie en offrant une meilleure expérience à des utilisateurs variés.
2. Usage de l’IA et du machine learning : les fonctionnalités reposant sur l’IA et le machine learning offrent une expérience très personnalisée tout en protégeant les données des utilisateurs en toute sécurité.
3. Fonction de réduction du mal des transports : Vehicle Motion Cues est une fonctionnalité innovante qui permet d’utiliser plus confortablement son appareil en déplacement, et devrait être utile à de nombreux utilisateurs.
4. Produits concurrents : comparées à celles de Google, les fonctionnalités d’accessibilité d’Apple offrent davantage d’options de personnalisation pour les utilisateurs.
5. Points à considérer lors de l’adoption : lors de l’introduction de nouvelles fonctionnalités d’accessibilité, la formation et l’accompagnement des utilisateurs sont importants, tout comme l’évaluation de la stabilité et de la fiabilité de la technologie.

[GN⁺]

Avis Hacker News

Résumé des commentaires Hacker News

• L’accessibilité est pour tout le monde

  • Les fonctionnalités d’accessibilité sont destinées à tout le monde. En vieillissant, tout le monde finit par en avoir besoin. L’alternative est pire. Le choix, c’est soit la mort, soit utiliser des fonctionnalités d’accessibilité.

• Des fonctionnalités d’accessibilité centrées sur l’utilisateur

  • J’aime les fonctionnalités d’accessibilité. Ce sont peut-être les dernières fonctionnalités qui profitent réellement à l’utilisateur. Les autres fonctions des apps et des systèmes d’exploitation sont conçues pour capter l’attention ou réduire progressivement leur utilité.

• Repères de mouvement du véhicule

  • La fonctionnalité Vehicle Motion Cues est très intéressante. J’avais le mal des transports au bout de 1 à 2 minutes en voiture, au point de ne pas pouvoir utiliser mon téléphone. C’est une fonctionnalité prometteuse qui mérite d’être essayée.

• De nouvelles voix pour VoiceOver

  • Je me demande quelles nouvelles voix seront ajoutées à VoiceOver. Comme Eloquence, un moteur TTS vieux de 20 ans, a été ajouté à iOS 17, DecTalk ou davantage de voix Siri pourraient aussi être ajoutés. Les nouvelles fonctions braille sont également étonnantes. VoiceOver sur Mac est aussi mentionné. J’espérais de meilleures descriptions d’images, mais beaucoup de nouvelles fonctions pour d’autres handicaps ont été annoncées. Ajouter du retour haptique à la musique est aussi très sympa. J’attends avec impatience les nouvelles fonctions de VoiceOver. J’aimerais aussi qu’il y ait un tutoriel VoiceOver, comme TalkBack sur Android.

• Global Accessibility Awareness Day (GAAD)

  • Demain, le 16 mai, c’est le Global Accessibility Awareness Day (GAAD). Plus de 176 événements auront lieu dans le monde. Il y a beaucoup d’occasions d’apprendre à améliorer l’accessibilité.

• Incitation à acheter un Vision Pro

  • Cette fonctionnalité aura sans doute suffisamment de limitations et d’inconvénients pour pousser à acheter un Vision Pro. Elle contribuera à faire accepter plus largement le suivi oculaire sur les appareils existants.

• La valeur des réglages d’accessibilité sur iOS

  • Les réglages d’accessibilité d’iOS sont une mine d’or pour personnaliser son appareil. Ils ne devraient pas être limités à l’accessibilité. Vehicle Motion Cues et les filtres de couleur dans CarPlay m’intéressent beaucoup. J’avais oublié la loupe intégrée à iOS.

• Les fonctions d’accessibilité de macOS

  • J’ai une vision meilleure que 20/20, mais j’adore les fonctions d’accessibilité de macOS. La fonction Zoom permet d’agrandir instantanément n’importe quelle partie de l’écran en maintenant deux touches modificatrices et en faisant défiler. La fonction de glisser à trois doigts est aussi très pratique.

• Utiliser un ordinateur comme dans un film

  • En combinant le suivi oculaire et l’affichage en grille, cela donnera l’impression d’utiliser un ordinateur comme les gens le font dans les films.

• Le suivi oculaire sur macOS

  • macOS dispose déjà d’une fonction de suivi oculaire. C’est amusant à essayer. Il suffit d’aller dans Réglages Système -> Accessibilité -> Contrôle du pointeur -> activer l’option "Pointeur de tête".