Microsoft travaille sur une application de prise de notes contextuelle qui génère automatiquement des notes simplement en surlignant des parties de l'écran.
Bien que Microsoft ait récemment mis à jour Sticky Notes pour prendre en charge les captures d’écran et les liens vers des sources, il semble que le géant technologique basé à Redmond ait des projets plus ambitieux pour les preneurs de notes.
Selon un brevet récemment publié, Microsoft travaille sur une application de prise de notes contextuelle qui génère automatiquement des notes lorsque les utilisateurs surlignent des données. Suggéré sous le nom de Surligneur Universel pour Prise de Notes Contextuelles, l’application serait assez révolutionnaire en soi.
Le Surligneur Universel pour Prise de Notes Contextuelles est capable de 4 tâches principales :
- Surlignage Interactif
- Prise de Notes Contextuelle
- Génération de Notes
- Rappel Facile
Fondamentalement, cette technologie vous permet de surligner une partie de votre écran. Cela peut être une partie d’une fenêtre ou d’une application. Le système détermine alors automatiquement le contexte du contenu surligné. Il rassemble des données pertinentes provenant du contenu, de la fenêtre, de l’application et de l’utilisateur.
Toutes ces informations sont combinées pour créer des notes pour vous. Ces notes sont stockées dans une base de données et peuvent être consultées ultérieurement à l’aide d’une application de prise de notes.
Comme nous l’avons mentionné auparavant, l’application de prise de notes contextuelle pourrait exister seule, mais aussi faire partie d’une autre plateforme. Cela inclut les applications de navigateurs web, telles que Microsoft Edge, par exemple, ou des applications natives de Windows, telles que l’application Calendrier, mais aussi des applications Microsoft 365, telles que Word, Excel ou Outlook.
À ce titre, Microsoft Edge dispose déjà d’un lecteur PDF performant qui traduit le texte en temps réel simplement en le surlignant, donc l’application de prise de notes décrite dans le brevet a déjà une base.
Cette application de type Sticky Notes contextuelle de Microsoft faciliterait la prise de notes et la rendrait plus efficace. Tout d’abord, c’est entièrement automatique, et la seule chose que les utilisateurs auraient à faire est de surligner l’information, ce qui réduirait le travail manuel et améliorerait la productivité dans l’ensemble.
Ensuite, la partie intrigante est sa manière contextuelle de prendre des notes : elle prend en compte tout ce que vous avez cherché en ligne lorsque vous surlignez certaines parties de votre écran, et elle fournit des notes enrichies de données pertinentes.
Il est intéressant de noter que Microsoft développe cette application de prise de notes contextuelle en tenant compte non seulement du contenu textuel, mais aussi du contenu basé sur les images, les vidéos ou l’audio. L’application traite ces formes de contenu et génère des notes textuelles à leur sujet.
Lorsque le contenu surligné comprend un type de donnée qui n’est pas textuel (par exemple, des données d’image, des données vidéo, des données audio, etc.), la présente divulgation traite le contenu surligné et génère des données textuelles. Par exemple, lorsque le contenu surligné comprend une image d’une voiture, les données textuelles seraient « la voiture » basées sur une reconnaissance d’image. La reconnaissance d’image peut identifier une caractéristique des données d’image en texte. Par exemple, les données textuelles peuvent également inclure « la voiture en tant que pictogramme » ou « le modèle de voiture X fabriqué par Y en l’année 2022. »
Troisièmement, il stocke automatiquement ces notes pour une utilisation ultérieure, vous n’aurez donc pas à vous inquiéter de les perdre. Selon le brevet, les notes seraient compatibles avec plusieurs applications de prise de notes, vous permettant de les ouvrir avec votre option préférée.
Nous pourrions potentiellement voir ce type de mise à jour pour Sticky Notes, voire pour Copilot. Ce dernier aurait du sens, car cette prise de notes contextuelle utiliserait des capacités d’IA pour générer des notes, et Copilot est déjà intégré dans de nombreux produits et services Microsoft.
Le document complet peut être lu ici.
