L'essentiel
- Date de publication :
- Mots-clés :
- Version actuelle : 4.1.1
- Version(s) précédente(s) : Seeing Ai de Microsoft - Version 3.7.1
- Prix TTC : Gratuit
- Fabricant : Microsoft Corporation
- Description : Créée pour les personnes déficientes visuelles et disponible gratuitement sous iOS, l’application Seeing AI est compatible avec le lecteur d’écran Voice Over. Elle utilise la caméra du smartphone et l’intelligence artificielle pour donner une description de l’environnement par l’intermédiaire d’un carrousel de fonctionnalités appelées « chaines » par l’application : lecture de texte imprimé, reconnaissance de produits par leurs codes-barres, reconnaissance de visages, d'éléments de l’environnement proche ou de ceux présents sur une capture photo, identification des billets de banques, des couleurs, détection du niveau de luminosité…
Présentation
Avec cette version, l’application Seeing AI apporte des améliorations sur les points suivants :
- L'exploration des photos au toucher pour obtenir une description des éléments présents sur la photo en appuyant le doigt sur les différentes parties de l’image. Cette fonction est également disponible pour des photos stockées sur le smartphone ou pour celles provenant des réseaux sociaux.
- La prise en charge des tablettes iPad et de leurs capacités d’affichage plus grande que sur un smartphone.
- La personnalisation de l’ordre d’affichage des chaînes afin d’accéder plus rapidement aux fonctionnalités les plus utilisées.
- La reconnaissance faciale par la chaine « personne » avec émissions de bips lors de l’analyse d’une photo invoquée par le menu contextuel d’une application tierce.
Notes du CERTAM
Note globale
Note : 4 sur 5
Pertinence / intérêt
Note : 5 sur 5
Intérêt de l'application dans les usages de la vie quotidienne
Performances
Note : 4,5 sur 5
Qualité des informations retournées par l'application
Ressources
Note : 3,5 sur 5
Consommation des ressources système : batterie…
Seeing AI version 4.1.1
Titre affiché : Seeing AI lecture de textes en temps réel par la chaîne « Texte court ».
- Message audio : « Texte court ».
- Vidéo : une boîte de conserve apparaît sur l’écran.
- Message audio : « conserverie depuis 1877, foie de morue au citron ».
Titre affiché : Seeing AI lecture de texte par la chaîne « Document ».
- Message audio : « Document ».
- Vidéo : une page de texte est progressivement visualisée dans son ensemble.
- Message audio : bord visible, bords haut et gauche non visibles, ne bouger plus. Traitement en cours…
- Émission de bips pendant le traitement.
- Lecture du texte reconnu : Postérité. La Joconde exprime le bonheur et la sérénité dans le silence d’un sourire. Célèbre entre tous, ce portrait connait une destinée pour le moins paradoxale. Volé ou détourné, mais incontournable, il fait l’unanimité, il inspire, il agace.
Titre affiché : Seeing AI détection de code barre par la chaîne « Produit »
- Message audio : « Produit »
- Vidéo : une boîte de sel est tournée devant la caméra du smartphone jusqu’à visualisation du code barre.
- Émission de bips pendant le traitement.
- Message audio et affichage : « Traitement en cours… »
- Message audio et affichage : Sel fin iodé Fluoré
Titre affiché : Seeing AI reconnaissance faciale par la chaîne « Personne »
- Message audio : « Personne »
- Le portrait d’Albert Einstein apparaît à l’écran
- Message audio : Albert à proximité de bord inférieur à moins d’un mètre
- Le portrait de Marilyn Monroe apparaît à l’écran
- Message audio : Marilyn à proximité de bord inférieur à moins d’un mètre
- Le portrait de Winston Churchill apparaît à l’écran
- Message audio : Winston à proximité de center inférieur à moins d’un mètre
Titre affiché : Seeing AI valeur faciale de billets de banque par la chaîne « Billet »
- Un billet de 10 euros est glissé sous l’optique du smartphone
- Message audio : 10 euros
- Le billet de 10 euros est enlevé, un billet de 5 euros est glissé sous l’optique du smartphone
- Message audio : 5 euros
- Le billet de 5 euros est enlevé, un billet de 20 euros est glissé sous l’optique du smartphone
- Message audio : 20 euros
Titre affiché : Seeing AI identification des éléments d’une photo par la chaîne « Scène »
- Prise en hauteur d’une photo montrant une série d’immeuble, une rue, des voitures stationnées et des piétons sur le trottoir
- Émission de bips pendant le traitement.
- Message audio et affichage : « Traitement en cours… »
- Message audio et affichage : probablement une rue avec des voitures et des bâtiments
Titre affiché : Seeing AI identification des éléments capturés en temps réel par la chaîne « Monde »
- La caméra du mobile est déplacée lentement sur 360°
- Message audio et affichage sur les éléments détectés pendant la prise de vue : écran, chaise, clavier, table, tasse, bouteille, téléphone mobile, tasse, clavier, écran, livre, écran, écran, table, chaise, chaise, chaise, écran, écran, table, chaise, chaise.
- Sur ce dernier élément le menu contextuel est appelé et affiché à l’écran
- Affichage des derniers éléments détectés et de leurs éloignements par rapport au mobile
- Pose d’une balise sur l’élément chaise le plus proche
- Retour à la visualisation en temps réel de l’environnement
- Signaux sonores avec identification par flèches directive et indication de la distance vers l’objet balisé
- Émission d’un signal sonore spécifique lorsque l’objet balisé se trouve à portée
Titre affiché : Seeing AI Détection de couleur par la chaîne « Couleur »
- L‘optique du mobile es déplacée au-dessus de trois éléments de couleurs jaune, bleu et mauve puis revient à sa position initiale
- Message audio : jaune, bleu, rose, bleu, jaune
Titre affiché : Seeing AI Détection du niveau de luminosité par la chaîne « Luminosité »
- L’optique du mobile est déplacée dans la pièce des zones les plus sombres vers une zone éclairée par une lampe
- Émission de signaux sonores de plus en plus aigüe au fur et à mesure du déplacement de l’optique vers les zones les plus lumineuses
Caractéristiques générales
- Nom commercial du produit : Seeing AI
- Prix : 0 €
- Fabricant : Microsoft Corporation
- Distributeurs : Apple Store
- Système d’exploitation : iOS 10 minimum, iPhone 12 Pro et 12 Pro Max pour l’utilisation du LIDAR (analyse de la distance des objets) dans la chaîne "Monde"
- Mode de distribution (CD, Abonnement) : Téléchargement sur l'Apple Store
-
Caractéristiques libres
- Date de sortie de la version actuelle : 17/06/2021
- Nombre de langue disponibles : environ 70 dont le français
- e-mail de contact : seeingai@microsoft.com
Principales fonctionnalités
- Lecture de texte en temps réel au survol par la caméra du mobile.
- Reconnaissance de caractères par capture photo automatique avec aide à l'identification des bords du document.
- Identification de produit de consommation par lecture du code barre.
- Reconnaissance faciale et description des visages.
- Reconnaissance de la valeur faciale des billets de banque.
- Description des éléments présents sur une photo.
- Description des éléments environnants et orientation vers un objet identifié.
- Annonce des couleurs placées devant l'optique du mobile.
- Détection du niveau de luminosité ambiant.
Points forts et points faibles
Points forts
- Le canal « Texte court » permet une lecture rapide et pratiquement en temps réel, des textes survolés par la caméra.
- La reconnaissance des éléments contenus sur une photo, notamment celles publiées sur les réseaux sociaux, avec une reconnaissance de caractères effectuée sur les textes de l'image.
- L'identification facile et rapide des produits de consommation par lecture de leurs codes barres.
- Le canal « Scène » avec une description de l’environnement, des objets, individus ou animaux visualisés par la caméra de l’appareil.
- Le côté pratique et les performances de la détection des billets de banques, de la reconnaissance des couleurs et de l’indication du niveau de luminosité.
- Encore expérimentale et perfectible, la chaîne « Monde » avec un guidage possible vers une balise associée à un objet détecté.
- Même approximative la reconnaissance de l’écriture manuscrite.
- L'ajout de raccourcis vocaux Siri pour lancer les fonctions de Seeing AI en dehors de l'application
Points faibles
- Lorsque la rubrique « aide rapide » est activée dans la chaîne luminosité, la tonalité de détection de la lumière ambiante n’est pas interrompue occasionnant une baisse du volume de la synthèse et des difficultés de compréhension du contenu textuel.
- La sélection d’une langue de reconnaissance et de lecture autre que le français ne fonctionne pas dans la chaîne « Document ».
- La détection de couleurs peu sensible aux nuances.
- La modification du nom d’une personne attribuée à une reconnaissance faciale est possible mais sa suppression ne semble pas prévue.
- Quelques rares éléments non ou mal traduits comme le titre de la chaîne « Document » ou le mot « center » utilisé lors de la localisation d’un visage dans la chaîne « personne ».
Avis du CERTAM
La note du CERTAM
Note : 4 sur 5
Disponible gratuitement sur l’Apple Store, l’application Seeing AI de Microsoft utilise l’intelligence artificielle et les services du Cloud. Toujours à portée de main sur son smartphone, elle offre aux personnes déficientes visuelles une description audio des éléments visuels qui composent l’environnement quotidien. Avec cette nouvelle version, la technologie LIDAR des derniers iPhones est également mise à profit pour aider à la localisation d’objets. Développée par un ingénieur non-voyant et accessible avec le lecteur d’écran Voice Over, c’est une application en constante évolution qui devient vite indispensable pour tout utilisateur équipé d’un iPhone.
