평일 오후 3시, 맥북 앞의 실무자.

슬랙(Slack, 협업 메신저) 창과 노션(Notion, 문서 협업 툴) 페이지, 그리고 수십 개의 크롬 탭이 어지럽게 띄워져 있다. 방금 본 레퍼런스 링크를 찾기 위해 브라우저 히스토리를 뒤지거나, 오늘 오전의 작업 흐름을 복기하며 스탠드업 보고서를 작성하기 위해 기억을 쥐어짜는 모습이 관찰된다. 미팅 시간은 AI 노트테이커가 기록해주지만, 정작 그 사이사이에 벌어지는 웹 서핑, 이메일 작성, 메신저 논의 같은 '진짜 업무'의 맥락은 기록되지 않은 채 휘발된다.

이런 파편화된 업무 기록의 풍경이 셜록(Sherlock, AI 노트 앱)의 등장으로 바뀐다.

셜록(Sherlock), macOS 기반 실시간 화면 분석 노트 출시

기존의 AI 미팅 노트 도구들이 화상 회의라는 특정 환경의 음성 데이터에 집중했다면, 셜록은 사용자가 컴퓨터 화면에서 수행하는 모든 시각적 활동으로 분석 범위를 넓혔다. 이는 회의실 밖에서 이루어지는 개별 작업의 맥락을 포착하려는 시도로 해석된다.

셜록(Sherlock, 실시간 화면 분석 기반 AI 노트 앱)은 특정 서비스의 API(Application Programming Interface, 응용 프로그램 인터페이스) 연동이나 외부 계정 통합 과정을 거치지 않는다. 대신 macOS(맥 오에스, 애플의 데스크톱 운영체제) 환경에서 사용자의 화면 자체를 실시간으로 읽어 들이는 방식을 채택했다. 이러한 접근은 특정 도구의 제약 없이 사용자가 현재 어떤 소프트웨어를 사용하든 상관없이 업무 맥락을 즉각적으로 파악하고 트래킹할 수 있게 한다.

분석 대상은 웹 브라우징부터 이메일, 슬랙(Slack, 협업 메신저), 노션(Notion, 올인원 워크스페이스), 카카오톡(KakaoTalk, 모바일 및 PC 메신저)에 이르기까지 광범위하게 설정되어 있다. 사용자가 여러 창을 오가며 정보를 수집하고 소통하는 과정에서 발생하는 행동 흐름을 분석하며, 이 과정에서 기억이 필요하거나 중요하다고 판단되는 지점을 자동으로 추출하여 노트 형태로 정리하는 메커니즘이 작동한다. 이는 사용자가 명시적으로 기록 버튼을 누르지 않아도 AI가 맥락을 판단하여 기록을 남기는 방식이다.

이러한 기능적 특성은 정보가 여러 플랫폼으로 파편화된 업무 환경에서 실질적인 효용을 보인다. 프로젝트 매니저(Project Manager, 프로젝트 관리자)가 여러 채널에 흩어진 요구사항과 진행 상황을 일일이 수동으로 기록하지 않아도, 셜록이 화면상의 맥락을 읽어 자동으로 정리해주는 구조가 형성된다. 콘텐츠 크리에이터(Content Creator, 디지털 콘텐츠 제작자)의 경우 과거에 탐색했던 영감이나 소재를 다시 찾아내야 하는 상황에서 셜록이 기록한 과거의 화면 분석 데이터를 통해 빠르게 접근하는 사례가 관찰된다. 또한 매일 진행되는 데일리 스탠드업(Daily Stand-up, 짧은 일일 업무 공유 회의)을 준비하는 팀원들에게는 자신이 수행한 작업 내역을 체계적으로 복기하고 보고서 형태로 변환하는 과정의 인지적 비용을 낮춰주는 효과가 나타난다.

현재 셜록은 macOS 전용으로 출시되었으며, 모든 기능을 무료로 제공하는 가격 정책을 유지하고 있다. 이는 사용자가 별도의 비용 부담 없이 자신의 업무 워크플로우에 AI 기반의 자동 기록 도구를 도입하여 실무 적용 가능성을 검토할 수 있는 환경을 제공한다.

그래놀라(Granola)와 티로(Tero)가 놓친 '회의 밖의 시간'

그래놀라(Granola, 화상 회의 내용을 기록하고 요약하는 AI 미팅 노트)나 티로(Tero, 회의 중 대화 맥락을 분석해 정리하는 AI 미팅 노트테이커)는 특정 이벤트인 미팅에 한정된 파편화된 기록만을 제공한다. 이들 도구는 캘린더 연동이나 화상 회의 플랫폼과의 API 인터그레이션을 통해 작동하며, 정해진 회의 시간 내에서만 데이터가 수집된다. 그러나 실제 지식 노동자의 하루를 관찰하면 업무의 본질은 회의가 아닌, 웹 브라우저를 통한 조사, 슬랙(Slack, 기업용 메신저)에서의 소통, 노션(Notion, 문서 및 협업 도구)에서의 초안 작성 등 회의 밖의 시간에서 발생한다. 기존 도구들은 이러한 일상의 워크플로우를 포착하지 못하며, 결과적으로 파편화된 기록만을 남기는 한계를 가진다.

셜록(Sherlock, 사용자의 화면을 분석해 업무 흐름을 기록하는 AI 노트 앱)은 연동 방식에서 근본적인 차이를 보인다. 외부 프로그램의 계정을 연결하거나 개별 툴마다 인터그레이션을 설정하는 대신, 사용자의 컴퓨터 화면 자체를 실시간으로 읽어내는 방식을 택한다. 이는 특정 소프트웨어에 종속되지 않고 사용자가 어떤 툴을 사용하든 그 맥락을 그대로 캡처할 수 있음을 의미한다. 셜록은 이처럼 화면을 직접 읽는 방식을 통해 웹 서핑부터 메신저 대화까지, 미팅이라는 경계를 넘어 업무의 전 과정을 연속적인 데이터로 추적한다. 개발자가 6개월 뒤 이 기술을 코드에 통합하거나 워크플로우 자동화에 활용할 때, API 호출 횟수나 연동 제한에 얽매이지 않고 화면이라는 범용적인 인터페이스를 활용한다는 점은 상당한 유연성을 제공한다.

베타 테스트 과정에서 관찰된 유스케이스는 이러한 접근 방식의 실무적 가치를 입증한다. 프로젝트 매니저들은 회의 외의 시간 동안 여러 툴에 흩어져 있던 프로젝트 맥락을 셜록을 통해 단일한 흐름으로 재구성하고 있었다. 또한 데일리 스탠드업 보고를 위해 슬랙에서 수행한 작업을 다시 찾아 헤맬 필요 없이, AI가 기록한 업무 흐름을 바탕으로 보고서를 체계적으로 작성하는 사례가 확인된다. 이는 단순히 기록을 남기는 것을 넘어, 파편화된 업무 맥락을 통합하여 생산성을 높이는 새로운 방식의 인터페이스를 제안한다. 기존 AI 미팅 노트가 회의 시간의 효율화에 집중했다면, 셜록은 업무의 전체 생애 주기를 기록하고 맥락을 복원하는 데 초점을 맞추고 있다.

PM과 크리에이터의 '맥락 복구' 비용 감소

실무자가 과거의 작업 맥락을 되찾기 위해 브라우저 히스토리를 뒤지거나 메신저 대화창을 검색하는 시간은 생각보다 상당하다. 컨텐츠 크리에이터의 경우 1~2주 전의 영감을 다시 찾는 과정에서 많은 에너지를 소모하며, 이 과정에서 원래의 아이디어가 희석되거나 유실되는 현상이 관찰된다. 셜록(Sherlock, 화면 분석 기반 AI 노트 앱)은 사용자가 무의식적으로 소비한 정보 파편을 자동으로 연결하여 이 문제를 해결한다. 이는 단순한 키워드 검색을 넘어 당시의 시각적 맥락까지 복구함으로써 창작의 연속성을 확보하는 결과로 이어진다. 기존의 북마크 방식이 정적인 저장이었다면, 셜록은 동적인 흐름을 기록하여 리콜의 정확도를 높인다.

미국 NGO(비정부기구)의 프로젝트 매니저(PM, 프로젝트 관리자) 사례에서는 분산된 정보의 통합 가치가 더욱 선명하게 드러난다. 회의 외의 업무 시간 동안 슬랙이나 노션 등 여러 툴을 오가며 발생하는 파편화된 맥락은 기존의 수동 기록 방식으로는 모두 담아내기 어렵다. 셜록이 화면 전체를 실시간으로 읽어 업무 흐름을 트래킹함으로써, 실무자는 흩어진 프로젝트의 진행 상황을 하나의 타임라인으로 통합 정리하는 비용을 획기적으로 줄일 수 있다. 이는 정보의 파편화를 막고 프로젝트의 전체 그림을 유지하는 데 기여하며, 관리자가 수동으로 맥락을 재구성해야 했던 운영 리소스를 직접적으로 절감시킨다.

매일 아침 진행되는 데일리 스탠드업(Daily Stand-up, 짧은 일일 업무 공유 회의) 보고 과정에서도 실질적인 효율 개선이 감지된다. 자신이 수행한 업무 이력을 기억에 의존해 재구성하는 대신, 시스템이 기록한 체계적인 이력을 바탕으로 공유하는 방식이 도입된다. 이는 보고를 위한 별도의 정리 시간을 없애고, 누락 없는 투명한 업무 공유를 가능하게 한다. 실무자가 보고서 작성을 위해 과거의 기록을 역추적하는 소모적인 과정을 제거함으로써, 보고의 목적이 단순한 나열이 아닌 성과 분석과 방향 수정으로 전환되는 효과가 있다.

이러한 변화는 실무자의 인지 부하를 낮추는 데 결정적인 역할을 한다. 인간의 단기 기억력은 한계가 있으며, 툴 간의 전환이 잦은 현대의 업무 환경에서는 맥락 전환 비용(Context Switching Cost)이 생산성 저하의 주범으로 지목된다. 셜록의 방식은 사용자가 기록이라는 행위에 의식적으로 에너지를 쓰지 않아도, AI가 백그라운드에서 맥락을 보존하는 구조를 제안한다. 결과적으로 실무자는 기록하는 노동에서 벗어나 본질적인 판단과 실행에 더 많은 자원을 투입할 수 있는 환경을 갖게 된다. 이는 문서화의 주체가 인간에서 시스템으로 이동하며 업무의 정의가 기록에서 실행 중심으로 변하는 전환점을 시사한다.