ChatGPT, 이제 Mac의 데스크탑 앱과 연동 가능!

ChatGPT와 관련된 기사가 있어서 소개해 드립니다.

기사를 요약하자면, OpenAI의 ChatGPT가 macOS용 데스크톱 앱에서 VS Code, Xcode 등 다양한 코딩 앱의 코드를 읽을 수 있게 되었습니다. 이 기능은 개발자들이 코드를 복사하여 붙여 넣는 번거로움을 줄여주며, Plus 및 Teams 사용자에게 제공됩니다. 향후 더 많은 앱과의 연동이 예정되어 있습니다.

 

 

ChatGPT가 이제 Mac의 일부 데스크탑 앱을 읽을 수 있습니다

 

OpenAI의 ChatGPT가 이제 컴퓨터의 다른 앱과 함께 작동하기 시작했습니다.

 

목요일, 이 스타트업은 macOS용 ChatGPT 데스크톱 앱이 VS Code, Xcode, TextEdit, Terminal, iTerm2와 같은 개발자 중심의 코딩 앱에서 코드를 읽을 수 있다고 발표했습니다.

 

이는 개발자들이 더 이상 코드를 ChatGPT에 복사하여 붙여 넣을 필요가 없음을 의미합니다. 이제 이 기능이 활성화되면 OpenAI는 사용자가 작업 중인 코드 섹션을 프롬프트와 함께 자동으로 ChatGPT에 전송합니다.

 

그러나, Cursor나 GitHub Copilot과 같은 인기 있는 AI 코딩 도구와 달리, ChatGPT는 현재 개발자 앱에 코드를 직접 작성할 수 없습니다.

 

이 기능은 "Work with Apps"라고 불리며, AI 에이전트와는 거리가 멀지만, OpenAI는 ChatGPT가 다른 앱을 이해하도록 하는 것이 에이전트 시스템 구축을 위한 "핵심 빌딩 블록"이라고 말합니다. 오늘날 AI 에이전트가 직면한 가장 큰 도전 중 하나는 프롬프트나 자체 응답이 아닌 컴퓨터 화면의 나머지 부분을 이해하는 것입니다.

 

OpenAI는 이 기능을 코딩 앱에 집중하고 있으며, 이는 AI 코딩 도우미가 LLM의 가장 인기 있는 사용 사례 중 하나로 떠올랐기 때문일 가능성이 큽니다.

이 기능은 오늘 Plus 및 Teams 사용자에게 제공되며, 향후 몇 주 내에 Enterprise 및 Edu 사용자에게도 제공될 예정입니다. OpenAI는 ChatGPT가 앞으로 글쓰기 작업에 사용할 수 있는 텍스트 기반 앱과 같은 다른 유형의 앱과도 작동할 수 있을 것이라고 말합니다.

 

TechCrunch와의 데모에서, OpenAI 직원은 ChatGPT 앱과 태양계를 모델링하는 간단한 프로젝트가 포함된 Xcode 환경을 열었습니다.

지구가 빠져 있었지만, 직원은 ChatGPT 내에서 Xcode 탭을 선택하여 AI 챗봇이 앱을 보도록 지시하고, 챗봇에게 "빠진 행성을 추가"하라고 요청했습니다.

챗봇은 지구를 나타내는 코드를 작성하여 프로젝트의 나머지 형식과 일치시켰습니다.

그러나, 여전히 ChatGPT의 답변을 환경에 다시 붙여넣어야 했습니다.

 

다른 앱을 읽기 위해 OpenAI는 주로 macOS 접근성 API를 사용하여 텍스트를 읽고 ChatGPT로 번역하고 있습니다. macOS의 화면 읽기 기능은 Apple의 VoiceOver 기능을 지원하는 데 사용되며, 거의 20년 동안 사용되어 왔습니다. 대부분의 일반적인 앱에서는 신뢰할 수 있는 것으로 간주되지만, 모든 앱에서 완벽하지는 않습니다.

 

Microsoft의 VS Code와 같은 일부 앱의 경우, Work with Apps는 콘텐츠를 쿼리하기 위해 특별한 확장을 설치해야 합니다. 그리고, 이름에서 알 수 있듯이, Apple의 화면 읽기 기능은 텍스트만 읽을 수 있으므로 ChatGPT가 사진, 객체의 방향 또는 비디오와 같은 시각적 요소를 이해하는 데 도움이 되지 않습니다.

 

Work with Apps는 특정 앱의 경우 프롬프트와 함께 마지막 200줄의 코드를 ChatGPT로 전송합니다.

다른 앱의 경우에는 가장 앞에 있는 창의 모든 코드가 챗봇의 입력으로 사용됩니다.

프로젝트의 올바른 부분에 집중하도록 ChatGPT를 돕기 위해 코드나 텍스트의 섹션을 강조할 수 있지만, ChatGPT는 주변 텍스트도 포함합니다.

이는 많은 입력 토큰을 사용할 것처럼 보입니다.

 

OpenAI가 Apple의 화면 읽기 기능과 호환되지 않는 다른 앱으로 이 기능을 확장할 계획이 어떻게 되는지는 불분명합니다.

OpenAI의 경쟁사 중 하나인 Anthropic은 사용자의 데스크탑 스크린숏을 분석하여 다른 앱을 이해하고 사용하는 AI 시스템을 출시했습니다.

솔직히 말해서, Anthropic의 접근 방식은 현재 상태에서 많은 개선이 필요합니다. 느리고 많은 실수를 합니다. 그러나, 이는 API에 의존하지 않고 다른 창에서 텍스트를 읽는 것 이상의 작업을 수행할 수 있는 보다 일반적인 AI 에이전트 버전입니다.

 

"이것은 에이전트가 되기 위한 것이 아니라, 코딩 도구와 협력하는 방법이며, 곧 더 많은 도구가 추가될 것입니다."라고 Embiricos는 TechCrunch와의 브리핑에서 말했습니다.

또한, 그는 "에이전트 측면에서, 이것은 정말 중요한 빌딩 블록입니다. ChatGPT가 여러분이 가지고 있는 모든 콘텐츠를 이해하거나 작업할 수 있다는 아이디어는 그것을 돕는 데 중요한 역할을 합니다."라고 말합니다.

 

이 에이전트로의 단계는 최근 Bloomberg에 따르면 OpenAI가 "Operator"라는 코드명으로 일반 목적의 AI 에이전트를 출시할 준비를 하고 있다는 보고서와 관련하여 특히 주목할 만합니다. 이 도구는 2025년 초에 출시될 예정이며, Anthropic의 Computer use나 Google의 "Jarvis" 에이전트와 같은 초기 시도와 경쟁할 것입니다.

 

OpenAI는 Apple이 12월에 ChatGPT와의 통합을 출시하기 직전에 먼저 macOS에서 이러한 기능을 출시하고 있습니다. Work with Apps가 OpenAI의 최대 후원자인 Microsoft가 만든 운영 체제인 Windows에 언제 도입될지는 불분명합니다.

 

 

이 포스팅은 쿠팡 파트너스 활동의 일환으로, 이에 따른 일정액의 수수료를 제공받습니다