Apple développe des fonctionnalités de reconnaissance à l’écran pour Siri
Nouveautés de la version bêta 2 d’iOS 18.2 : fonctionnalités et améliorations de Siri
Le déploiement de la version bêta 2 d’iOS 18.2 a commencé lundi pour les développeurs, introduisant une série de fonctionnalités intéressantes visant à améliorer l’expérience utilisateur. Cette mise à jour comprend notamment l’intégration de ChatGPT dans l’application Paramètres, une nouvelle option « Créer une image » dans Notes, une fonctionnalité Localiser améliorée et des badges de notification mis à jour dans l’application Mail, entre autres améliorations. Une version stable de cette mise à jour devrait être disponible le mois prochain.
Les nouvelles fonctionnalités de reconnaissance contextuelle de Siri
En plus de l’ensemble de fonctionnalités plus large, la version bêta d’iOS 18.2 ouvre la voie à des avancées significatives dans les fonctionnalités de Siri. Apple développe actuellement une fonctionnalité sophistiquée qui améliore la reconnaissance contextuelle de Siri, dans le cadre de sa suite Apple Intelligence. De nouvelles API ont été fournies aux développeurs, permettant à Siri d’accéder au contenu à l’écran à partir de leurs applications.
Comment Siri peut interagir avec le contenu à l’écran
Selon la documentation d’Apple , lorsque les utilisateurs demandent des informations sur le contenu affiché à l’écran ou cherchent à exécuter une action en rapport avec celui-ci, Siri et Apple Intelligence sont équipés pour récupérer ce contenu afin de fournir des réponses appropriées. Par exemple, si un utilisateur consulte un document, il peut simplement demander « Dis Siri, de quoi parle ce document ? » et recevoir un résumé détaillé.
Intégration de ChatGPT avec Siri
La mise à jour bêta iOS 18.2 en cours comprend également une meilleure intégration de ChatGPT avec Siri, qui permet aux utilisateurs de se renseigner sur divers formats tels que des images, des vidéos, des PDF et des présentations. Par exemple, en demandant à Siri « De quoi parle ce document ? », Siri peut capturer les informations via une capture d’écran, les transmettre à ChatGPT et fournir à l’utilisateur les détails nécessaires.
Caractéristiques distinctives : ChatGPT et Onscreen Awareness
Cependant, comme le souligne MacRumors , il est essentiel de noter que l’intégration avec ChatGPT n’équivaut pas aux capacités complètes de reconnaissance à l’écran décrites dans la documentation d’Apple. Cette fonctionnalité est conçue pour que Siri puisse traiter, analyser et interagir de manière exhaustive avec le contenu visible à l’écran. Par exemple, un utilisateur recevant un SMS avec un numéro de téléphone peut demander à Siri d’ajouter ce numéro directement à ses contacts.
Disponibilité et perspectives d’avenir
Il est intéressant de noter que la fonctionnalité avancée de détection à l’écran n’est pas encore incluse dans la version bêta 2 actuelle d’iOS 18.2. Actuellement, ChatGPT se limite à l’accès aux captures d’écran, ce qui suggère qu’une expérience Siri plus intégrée pourrait arriver avec les futures mises à jour, n’apparaissant potentiellement pas avant l’année prochaine.
Pour plus d’informations et d’images, visitez la source originale ici .
Laisser un commentaire