마이크로소프트는 화면의 일부를 강조 표시하기만 하면 자동으로 메모를 생성하는 컨텍스트 기반 노트 작성 앱을 개발 중입니다.

마이크로소프트가 최근 스크린샷 캡처 및 출처 링크 지원을 위해 스티키 노트를 업데이트했음에도 불구하고, 레드먼드 본사의 기술 거인은 노트 작성자를 위한 더 큰 계획을 가지고 있는 것 같습니다.
최근 공개된 특허에 따르면, 마이크로소프트는 사용자가 데이터를 강조 표시할 때 자동으로 메모를 생성하는 컨텍스트 기반 노트 작성 애플리케이션을 개발하고 있습니다. 컨텍스트 노트 작성을 위한 유니버설 하이라이터라는 이름으로 제안된 이 앱은 그 자체로 상당히 혁신적일 것입니다.
컨텍스트 노트 작성을 위한 유니버설 하이라이터는 4가지 주요 작업을 수행할 수 있습니다:
- 인터랙티브 하이라이팅
- 컨텍스트 노트 작성
- 메모 생성
- 쉬운 회상
기본적으로 이 기술은 화면의 일부를 강조 표시할 수 있게 해줍니다. 이는 창의 일부거나 애플리케이션일 수 있습니다. 그러면 시스템은 강조 표시된 콘텐츠의 컨텍스트를 자동으로 파악합니다. 콘텐츠, 창, 애플리케이션 및 사용자로부터 관련 데이터를 수집합니다.
이 모든 정보는 결합되어 귀하를 위한 메모를 생성합니다. 이러한 메모는 데이터베이스에 저장되며 나중에 노트 작성 애플리케이션을 통해 접근할 수 있습니다.
앞서 언급했듯이, 컨텍스트 기반 노트 작성 앱은 독립적으로 존재할 수 있지만, 또한 다른 플랫폼의 일부가 될 수도 있습니다. 여기에는 예를 들어 마이크로소프트 엣지와 같은 웹 브라우저 앱이나, 캘린더 앱과 같은 네이티브 윈도우 앱, 또는 워드, 엑셀, 아웃룩과 같은 마이크로소프트 365 앱이 포함됩니다.
이와 관련하여, 마이크로소프트 엣지는 이미 텍스트를 강조 표시하기만 하면 실시간으로 번역하는 성능 좋은 PDF 리더를 갖추고 있어, 특허에서 설명된 노트 작성 앱은 이미 기반이 마련되어 있습니다. 
이 마이크로소프트의 컨텍스트 기반 스티키 노트 앱은 노트 작성 작업을 더 쉽게 하고 효율적으로 만들어줄 것입니다. 첫째, 모든 것이 자동이므로 사용자들은 정보를 강조 표시하기만 하면 되고, 따라서 수작업을 줄이고 생산성을 전반적으로 향상시키게 됩니다.
둘째, 흥미로운 점은 정보를 강조하는 동안 사용자가 온라인에서 찾고 있던 모든 것을 고려하여 메모를 작성하는 컨텍스트 방식입니다: 특정 부분을 강조 표시할 때 유용한 데이터가 포함된 메모를 제공합니다.
재미있게도, 마이크로소프트는 이 컨텍스트 기반 노트 작성 앱이 텍스트 콘텐츠뿐만 아니라 이미지, 비디오, 오디오 기반 콘텐츠도 고려하도록 개발하고 있습니다. 이 앱은 이러한 형태의 콘텐츠를 처리하고 그에 대한 텍스트 기반 메모를 생성합니다.
강조 표시된 콘텐츠에 비텍스트 타입의 데이터가 포함되면(예: 이미지 데이터, 비디오 데이터, 오디오 데이터 등), 현재 공개된 내용은 강조 표시된 콘텐츠를 처리하고 텍스트화된 데이터를 생성합니다. 예를 들어, 강조 표시된 콘텐츠에 자동차 이미지가 포함되면, 텍스트 데이터는 이미지 인식을 기반으로 “자동차”가 됩니다. 이미지 인식은 이미지 데이터의 특징을 텍스트로 식별할 수 있습니다. 예를 들어, 텍스트 데이터는 “그림으로서의 자동차” 또는 “2022년에 Y에 의해 제조된 모델 X 자동차”를 추가로 포함할 수 있습니다.
셋째, 이 메모는 나중에 사용하기 위해 자동으로 저장되므로 잃어버릴 걱정을 할 필요가 없습니다. 특허에 따르면, 메모는 여러 노트 작성 앱과 호환되어 사용자 선호 옵션으로 열 수 있습니다.
우리는 스티키 노트나 심지어는 코파일트를 위한 이러한 종류의 업데이트를 잠재적으로 볼 수 있습니다. 후자는, 이 컨텍스트 기반 노트 작성 기능이 AI 기능을 사용하여 메모를 생성하는 것이기 때문에 말이 되며, 코파일트는 이미 많은 마이크로소프트 제품 및 서비스에 통합되고 있습니다.
전체 논문은 여기에서 읽을 수 있습니다.