Apple l'IA se muscle avec de nouvelles fonctionnalités d'accessibilité pour iOS 17

De manière quelque peu inhabituelle, Apple a annoncé à l'avance https://www.apple.com/au/newsroom/2023/05/apple-previews-live-speech-personal-voice-and-more-new-accessibility-features/ les nouvelles fonctionnalités qui seront intégrées à iOS 17 avant son annonce officielle. Les principales nouveautés sont Live Speech et Personal Voice Advanced Speech Accessibility, Assistive Access pour aider les utilisateurs souffrant de handicaps cognitifs, et un nouveau mode de détection dans Magnifier pour aider les utilisateurs souffrant de déficiences visuelles.

La plus futuriste de ces nouveautés est peut-être la voix personnelle, qui utilise l'apprentissage automatique (IA) sur l'appareil pour permettre aux utilisateurs qui risquent de perdre leur capacité à parler (comme une personne récemment diagnostiquée avec la SLA) de créer une voix qui leur ressemble. Les utilisateurs créent leur voix de personne en entraînant le modèle d'IA à recréer leur voix en lisant une série de textes aléatoires, ce qui prend environ 15 minutes. Cela s'intègre à la nouvelle fonctionnalité Live Speech qui permet aux utilisateurs de taper ce qu'ils veulent dire et de le faire prononcer à voix haute lors d'un appel téléphonique, d'un appel FaceTime ou d'une conversation en personne.

Assistive Access a été conçu pour prendre les applications iPhone les plus populaires et les réduire à leurs fonctions les plus essentielles, afin de les rendre plus faciles à utiliser et à manipuler. Apple a travaillé avec des utilisateurs souffrant de handicaps cognitifs et leurs sympathisants pour rendre plus accessibles les applications telles que Phone et FaceTime en les transformant en une seule application Appels, tout en rationalisant Messages, Appareil photo, Photos et Musique. L'objectif de ces changements est de réduire la charge cognitive des utilisateurs afin qu'ils puissent plus facilement faire ce qu'ils veulent ou profiter de l'expérience iPhone avec beaucoup moins d'inconvénients.

Apple l'entreprise a également présenté en avant-première le mode détection de l'application Magnifier - un autre outil basé sur l'IA - qui introduit la fonction "pointer et parler" pour permettre aux utilisateurs malvoyants d'interagir plus facilement avec des objets physiques dans leur maison ou autour d'eux, qui comportent plusieurs étiquettes de texte. Par exemple, lors de l'utilisation d'un appareil ménager comme un four à micro-ondes, Point and Speak combine les données de la caméra et du scanner LiDAR pour lire le texte de chaque bouton lorsque l'utilisateur déplace ses doigts sur le clavier du four. Point et Speak fonctionne également avec la détection de personnes, la détection de portes et les descripteurs d'images pour aider les utilisateurs à naviguer plus facilement dans leur environnement.

Si ces avant-premières des nouvelles fonctionnalités d'accessibilité à venir dans iOS 17 indiquent que la WWDC 2023 sera riche en annonces, il est clair que Apple souhaite également montrer qu'elle n'est pas en reste lorsqu'il s'agit d'introduire des fonctionnalités alimentées par l'IA dans ses produits.

Achetez le dernier iPhone SE sur Amazon débloqué et renouvelé pour 399 $.