말로 지시하고 두 에이전트 AI와 협업한다: 나의 Peter OS 구축기

요즘 저는 대부분의 업무 지시를 마이크로 전달하고 있습니다. 조사할 주제와 글의 방향을 말하고, 돌아온 결과를 보며 수정할 내용을 다시 설명하고 있습니다. Peter OS는 이렇게 시작한 일을 기록하고 정리하는 공간입니다. GrokBot과 GPT Dot, Google Drive의 자료를 제 업무에 연결하기 위해 만들고 있습니다.

2026년 10월 19일에는 COVIS, KAION, FIELDLOG의 글을 제가 공개했습니다. 뉴욕러버 영상은 제 목소리가 들어간 약 6분 54초의 검토본까지 나왔습니다. 글과 영상은 서로 다른 단계에 있었고, 다음에 제가 할 일도 달랐습니다. 이 글은 그 사이에서 사용한 도구와 자료, 제가 내린 제작 판단을 묶은 기록입니다.

차량 중앙 화면에서 Google Drive 작업 폴더를 열어본 실제 모습. 위치 정보가 담긴 지도 영역은 제외했다. Peter 제공 사진.

출처: Peter 제공 사진

1. 마이크를 켜고 일을 설명합니다.

지금은 키보드로 긴 지시문을 쓰기보다 말로 설명하는 경우가 많습니다. 무엇을 만들지, 어떤 자료를 볼지, 방금 받은 결과에서 무엇을 고칠지 마이크로 전달합니다. AI가 정리한 요청을 읽고 제 의도와 맞는지 살핀 뒤 다음 일을 이어갑니다.

원고가 필요한지, 실제 이미지를 찾아야 하는지, 영상을 편집해야 하는지도 함께 설명합니다. 결과를 받은 뒤에는 문장과 화면, 재생되는 소리를 보면서 수정 의견을 다시 말합니다.

이렇게 일하려면 대화가 끝난 뒤에도 요청이 남아 있어야 합니다. 어떤 방향으로 만들기로 했는지, 직전에 무엇을 바꿨는지, 다음에 어떤 자료를 가져와야 하는지를 다시 찾을 수 있어야 하니까요. 말로 시작한 일을 기록으로 이어주는 공간이 필요했습니다.

지난 GPT Dot 첫 사용기 이후 실제 일을 맡기고 결과를 고치면서, 연결할 정보와 남길 기준을 구체화하고 있습니다.

2. 여러 일을 콘텐츠 한 편씩 묶습니다.

Peter OS를 만드는 근본적인 이유는 제가 진행하는 수많은 일을 심플하게 기록하고 정리하기 위해서입니다. COVIS의 제품 글, KAION의 상품 소개, FIELDLOG의 정보성 글, 뉴욕러버의 영상은 필요한 재료와 제작 방식이 다릅니다. 작업 목록에 채널 이름만 적어서는 다음 일을 이어가기 어렵습니다.

콘텐츠 상태와 브랜드별 제작 기준을 함께 보는 Peter OS 대시보드. 화면의 숫자는 저장된 기록 수다. 2026년 10월 19일 캡처.

출처: Peter OS 실제 화면 · Peter

그래서 콘텐츠 한 편을 하나의 Work로 다룹니다. 한 작업 안에 왜 만드는지, 핵심은 무엇인지, 참고할 출처와 실제 경험은 무엇인지 담습니다. 원고와 이미지, 검토할 파일도 그 콘텐츠의 맥락에서 찾을 수 있게 합니다.

예를 들어 글을 다시 열었을 때 제목만 보는 대신, 독자에게 전달할 핵심과 사용할 자료부터 살핍니다. 수정이 생기면 그 작업에 남기고, 결과물이 나오면 다음에 볼 파일을 연결합니다. 서로 다른 채널의 기준을 섞지 않고 한 편의 흐름을 이어가는 방식입니다.

다시 열었을 때 어디까지 했고 무엇이 남았는지 알 수 있도록 기록할 항목과 화면을 고르고 있습니다.

3. GrokBot은 조사하고 GPT Dot은 제작으로 이어갑니다.

두 AI의 역할은 제 업무에 맞춰 나눴습니다. GrokBot에는 X에서 나오는 이야기와 관련 자료를 살피고 사실관계를 확인하는 일을 맡깁니다. GPT Dot에는 X 밖의 자료 조사와 원문 재확인, 원고 작성, 이미지와 영상 제작을 맡깁니다.

제가 하는 일은 다룰 주제를 정하고 두 AI의 결과를 다음 작업에 연결하는 것입니다. 조사 결과를 넘길 때는 링크와 함께 무엇을 확인하려고 가져온 자료인지 전달합니다. 글로 옮길 때는 출처에서 확인한 사실과 제 생각을 구분합니다.

Peter OS의 Research에서 10월 19일 보고분에는 GPT Dot 쪽 관찰 다섯 개와 GrokBot 쪽 관찰 네 개, 총 아홉 개가 남아 있었습니다. 어느 쪽에서 가져온 내용인지 보고 원문으로 돌아갈 수 있습니다. 이 기록을 정해진 항목으로 정리한 구조화 브리프도 준비했습니다.

10월 19일 보고분인 GPT Dot(DOT) 5건과 GrokBot(GROKBOT) 4건을 정리한 브리프. 기존 관찰의 구조화 요약임을 화면에서도 구분한다.

출처: Peter OS 실제 화면 · Peter

자료와 작업 목적은 두 AI에게 후속 요청을 할 때의 기준점이 됩니다. 답변이 달라져도 원문으로 돌아가 근거를 살핍니다.

GrokBot의 조사 자료를 받아 녹음용 대본을 준비한 기록. 같은 Work에 자료 수신과 대본 결과가 이어서 남아 있다.

출처: Peter OS 실제 화면 · Peter

4. Google Drive에서 같은 원본을 봅니다.

Google Drive는 저와 두 AI가 작업 자료를 공유하고 열람하는 공간입니다. 대화에는 지시와 수정 의견이 쌓이고, Drive에는 실제 제작에 사용할 파일이 남습니다. Peter OS에서는 그 자료가 어느 작업에 필요한지 연결합니다.

뉴욕러버 작업에는 원본 녹음과 보정한 음원, 자막, 검토 영상, 수정 가능한 편집 자료가 있습니다. 원본과 작업 중인 파일, 제가 열어볼 결과물을 구별해 두고 다음 작업을 맡깁니다. 같은 영상이라도 소리를 다시 고치는 일과 자막 문장을 고치는 일에 필요한 파일이 다르기 때문입니다.

자료를 전달할 때는 어느 폴더와 파일을 볼지 지정합니다. AI가 만든 결과를 제가 열어보고 수정할 부분을 말하면, 그 결과물을 기준으로 다음 작업이 이어집니다. 대화에서 설명한 내용을 실제 파일과 맞춰볼 수 있는 것이 이 구성의 장점입니다.

공개할 자료는 여기서 다시 고릅니다. 이 글에 쓰는 캡처에서도 개인 계정과 비공개 주소를 가리고, 작업과 파일이 어떻게 연결되는지 보이는 부분을 사용합니다.

최종 Drive 폴더와 편집 프로젝트, 자막, 출처 자료를 연결한 Work 기록. 다음 검토할 결과물을 다시 열 수 있다.

출처: Peter OS 실제 화면 · Peter

5. 여섯 개의 녹음이 영상으로 돌아왔습니다.

뉴욕러버 영상의 출발점은 제가 직접 녹음한 음성 파일 여섯 개였습니다. 제 말하는 속도와 표현을 살리면서 음질과 음량을 정리하고, 녹음에 맞춰 영상과 자막을 붙였습니다. 결과물은 약 6분 54초의 MP4와 수정 가능한 편집 자료입니다.

Google Drive에서 연 실제 검토 영상. 직접 만든 설명 그래픽과 큰 한 줄 자막이 보이는 장면이다.

출처: Peter OS 실제 화면 · Peter

자료를 준비하는 과정에는 빈틈도 있었습니다. 처음 GrokBot 쪽에서 모은 열한 개의 자료는 캡처와 PDF, 사진 등이었고 실제 영상 파일은 없었습니다. 재사용 권리도 확인되지 않았습니다. 제가 요청한 실제 영상 중심의 편집에는 추가 자료가 필요했습니다.

초기 자료는 화면에 넣지 않았습니다. 이후 NASA가 촬영하고 공개한 자료와 라이선스를 확인한 Pexels 영상 등 일곱 개의 원본 클립을 확보했습니다. NASA 미디어 이용 안내와 Pexels 라이선스를 살펴보고, 자료화면에는 촬영 맥락과 출처를 표시했습니다. 일반 주행 장면을 특정 자율주행 기능의 성능 증거로 소개하지 않도록 용도도 구분했습니다.

자막은 원고의 길이로 시간을 추정하지 않고 실제 녹음에 맞췄습니다. 대본과 다르게 말한 구간은 음원을 다시 확인했고, 최종 MP4에 들어간 음성이 보정한 원본과 일치하는지도 검사했습니다. 제가 녹음한 말이 편집 과정에서 어떻게 남았는지 결과물까지 대조한 것입니다.

음성으로 일을 지시하는 것과 제 목소리를 콘텐츠의 원본으로 쓰는 일이 여기서 만납니다. 저는 방향과 표현을 정하고, AI에는 그 목소리를 바탕으로 제작을 이어가는 일을 맡겼습니다.

6. 말로 고친 기준을 다음 제작에도 남깁니다.

작업을 맡기다 보면 수정 의견이 구체적으로 바뀝니다. COVIS 썸네일은 최소 1,000×1,000픽셀의 정사각형으로 만들고, 실제 제품 이미지를 쓰도록 했습니다. 흰 배경에서는 로고 뒤에 별도 배경 상자가 남지 않도록 고쳤습니다.

뉴욕러버 영상에는 다른 기준이 있습니다. 정지 이미지를 천천히 확대해 영상처럼 보이게 하는 효과를 빼고, 설명하는 대상과 직접 관련된 실제 영상을 최대한 쓰도록 했습니다. 자막도 실제 녹음과 애드립에 맞춰 자연스러운 한 줄로, 크게 보여달라고 요청했습니다.

이 기준들은 한 번의 수정 메시지로 끝내지 않고 Peter OS에 남겼습니다. 현재 어떤 기준을 쓰는지, 제가 이후 무엇을 바꿨는지 함께 볼 수 있습니다. 다음 제작을 시작할 때 이 기록을 열면 결과물을 어떤 기준으로 살펴볼지 명확해집니다.

COVIS 썸네일 크기와 로고 배경에 관한 피드백이 현재 기준과 변경 이력으로 남은 화면. 2026년 10월 19일 캡처.

출처: Peter OS 실제 화면 · Peter

제가 만드는 시스템에는 이런 선택이 들어갑니다. 이미지 크기를 정하고, 쓸 수 있는 자료를 구분하고, 말한 내용을 다음 작업에 가져갈 수 있게 기록하는 일입니다. 화면을 예쁘게 만드는 것에 앞서 실제로 반복되는 판단을 찾아 담고 있습니다.

7. 휴대폰과 Model Y에서도 같은 일을 이어갑니다.

이 흐름에는 장소의 변화도 포함됩니다. 휴대폰에서 지시와 확인을 이어가고, 테슬라 Model Y에서 Grok과 차량 모니터를 활용해 PC에서 하던 업무를 이어가는 것입니다. 도입 사진에는 차량 중앙 화면에 Google Drive의 작업 폴더를 열어둔 모습이 담겨 있습니다. 짧게 촬영한 영상에서는 녹음용 최종 대본의 파일 목록을 확인하고 내 드라이브로 이동합니다. 또 다른 영상에는 차량의 Grok이 요청 전달과 진행 상태를 음성으로 안내하는 장면이 담겼습니다.

영상: 영상 1 · 차 안에서 Google Drive에 저장된 녹음용 최종 대본을 확인하는 실제 장면. 사용자 촬영, 약 9.5초. 원음을 유지했다.

영상: 영상 2 · 차량의 Grok이 요청 전달과 진행 상태를 안내하는 실제 장면. 사용자 촬영, 약 8.7초. 한국어 자막과 원음을 유지했다. 작업 완료 결과를 입증하는 영상은 아니다.

마이크로 요청을 남긴 뒤 작은 화면에서 진행 상태를 보고, 필요할 때 더 큰 화면에서 원고나 영상을 검토합니다. 기기가 바뀌어도 같은 작업의 목적과 자료를 이어서 보는 것이 핵심입니다. Peter OS의 기록과 Drive의 파일을 연결한 이유도 여기에 있습니다.

차량에서 화면을 읽거나 조작하는 업무는 안전하게 주차한 상태를 전제로 합니다. 주행 중 음성 대화와 주차 후 화면 작업은 구분해서 다뤄야 합니다. 긴 원고와 영상의 세부 검토에는 여전히 그에 맞는 화면과 시간이 필요합니다.

8. 지금 연결한 범위에서 다음으로 나아갑니다.

현재 두 AI 사이에 요청과 링크를 전달하는 단계는 제가 맡고 있습니다. Research의 구조화 브리프는 모아둔 관찰을 정리한 결과이며, 그 자체가 새로운 조사나 독립적인 교차 검증을 뜻하지는 않습니다. 뉴욕러버 영상도 제가 전체를 듣고 최종 판단할 단계가 남아 있습니다. 이것이 이번 기록에서 확인한 작업 범위입니다.

MP4 전달 후 사용자 검토를 기다리는 실제 Work 상태. 영상 공개는 별도의 요청에 따르도록 구분되어 있다.

출처: Peter OS 실제 화면 · Peter

그 안에서도 일하는 모습은 달라졌습니다. 대부분의 지시를 말로 시작하고, 조사와 제작을 나눠 맡기고, 원본과 결과물을 오가며 여러 업무를 진행합니다. 제가 집중하는 일도 무엇을 만들지 정하고, 자료의 빈틈을 찾고, 다시 쓸 수 있는 제작 기준을 남기는 쪽으로 이어지고 있습니다.

VECTORLOG에는 이런 구현 과정을 남기고 싶습니다. 함께 일할 사람이 실제 화면과 결과물을 보고, 제가 어떤 문제를 어떻게 다루는지 판단할 수 있도록요. 작업 한 편의 범위를 정하는 방식, 자료를 고르는 기준, 수정한 이유까지 보이면 협업에 관한 이야기도 더 구체적으로 시작할 수 있습니다.

Peter OS는 여러 일을 간단하게 기록하고, 말로 시작한 요청을 결과물까지 이어가기 위해 제가 직접 쓰며 만드는 업무 환경입니다. 이번에는 그 연결이 글과 영상으로 돌아오는 과정을 기록했습니다.

관련 기록: GPT Dot 첫 사용기 · 바이브 코딩과 도메인 지식

이런 업무 흐름을 함께 만들고 싶다면

여러 업무를 기록하고 정리하는 구조, AI와 자료를 주고받는 방식, 콘텐츠 제작과 웹 도구를 연결하는 흐름을 함께 고민하고 싶다면 협업을 제안해 주세요. 지금 하는 일과 바꾸고 싶은 지점을 함께 알려주시면 좋겠습니다.

CONTACT프로젝트나 협업 이야기, 편하게 연락 주세요.협업 문의하기↗