GPT-6 아스트라 vs 클로드 페이블 5.1 운영 업무 비교, 세금·구독료·메일함·브라우저·에이전트 [대결 시리즈 4편: 운영팀]

1편 개발팀 2 대 2, 2편 기획팀 2 대 2, 3편 마케팅팀은 3 대 2로 아스트라였어요. 세 편을 치르고 나서야 한쪽이 한 걸음 앞섰어요.

이번 경기장은 운영팀이에요. 이 부서 일은 화려하지 않아요. 대신 틀리면 안 돼요. 반년 치 장부를 맞추고 메일함에서 결제 내역을 찾아내고 사내 사이트에 자료를 올리고 밤에는 사람 대신 자동 작업이 돌아가요. 하나라도 빠지면 다음 달에 누군가 뒤집어써요.

그런데 이 부서 일을 두고는 심판들 말이 서로 안 맞았어요. 🔥

AI 자동화 채널을 운영하는 네이트 허크는 조회수 37만 회 영상에서 숙제를 하나 냈어요. 브라우저를 열어 사이트에 자료를 올리는 일이었어요. 그러고 나서 이렇게 말했어요. "브라우저 작업은 코덱스와 GPT 모델이 확실히 낫다."⁵ 오픈AI도 이번 모델을 소개하면서 컴퓨터와 브라우저 조작을 가장 앞에 세웠어요. 데스크톱 조작 시험 OSWorld에서 72.6%를 받았다고 적었고요¹.

그런데 에이전트를 직접 굴리는 레딧 운영자는 결론이 반대였어요. 같은 시험 다섯 가지를 두 모델에게 치르게 한 뒤 "아스트라가 에이전트 시험은 다 1등인데, 내 기본 모델은 안 바꾼다. 오늘은 아니다"라고 썼어요⁷. 조회수 13만 회의 폴 립스키는 한술 더 떠서 메일함 정리 같은 일에는 "둘 다 과하다"고 했고요⁶.

브라우저는 아스트라, 에이전트는 페이블, 메일은 아무나. 세 심판이 세 방향을 가리켜요.

그래서 운영팀 일은 누구에게 맡겨야 할까요? 🤔

이번엔 참고한 기록이 앞 편들과 조금 달라요. 유튜브 영상뿐 아니라 레딧에 올라온 에이전트 시험 기록과 구독 한도 실측 글까지 들어와요. 반년 치 세금, 메일 두 계정의 구독료, 메일함 분류, 강의 영상 업로드, 그리고 사람이 안 보는 동안 도는 에이전트 시험 다섯 가지. 이 글은 그 기록을 다섯 판으로 다시 중계해요.

운영 일을 안 해 봤어도 괜찮아요. 결과물은 원본 영상에서 잘라 그대로 보여 드리고 모르는 말은 노란 상자에서 바로 풀어 드릴게요.

오늘의 대진표

운영팀의 한 달은 돈에서 시작해요. 장부를 맞추고 세금을 예상하고 매달 나가는 구독료를 잡아요. 그다음 메일함이에요. 쌓인 메일을 분류하고 답장 초안을 써요. 자료가 정리되면 사내 사이트나 커뮤니티에 올리고요. 마지막엔 사람이 퇴근한 뒤에도 돌아가는 자동 작업을 세워 둬요.

그래서 판마다 실패의 모양이 달라요. 1판과 2판은 빠뜨리면 안 되는 일이에요. 3판은 누가 해도 되는 일이고요. 4판은 화면을 직접 눌러야 끝나는 일, 5판은 사람이 안 볼 때 막히면 어떻게 하느냐를 봐요. 앞 세 편에서 승부를 가른 건 버릇이었어요. 아스트라는 먼저 묻고 자료 밖까지 확인했고 페이블은 시킨 것보다 더 해 왔어요. 이번 편에서는 그 버릇이 한 번 뒤집혀요.

판마다 하나씩만 눈여겨보세요. 👀

이 시리즈, 왜 만들었냐면요

독립 평가 기관 아티피셜 애널리시스는 여러 모델에게 같은 시험을 잔뜩 치르게 한 뒤 종합 점수를 매겨요. 이번 결과는 아스트라 53점, 페이블 53점이었어요¹⁰¹¹. 점수표로는 더 가릴 게 없으니 진짜 일을 시켜 보고 결과물을 나란히 놓아 보기로 했어요.

그런데 모인 기록마다 결론이 달랐어요. 뜯어보니 이유는 단순했어요. 시킨 일이 서로 달랐어요. 그래서 기록을 회사 부서별로 다시 묶었어요. 운영 일은 운영 일끼리 모아야 "우리 팀 일에는 누가 맞나"에 답할 수 있으니까요.

시리즈는 이렇게 다섯 편으로 나가요.

• 1편 개발팀: 게임 만들기부터 버그 찾기까지
• 2편 기획팀: 발표자료부터 설명서까지
• 3편 마케팅팀: 판매 글부터 광고 영상까지
• 4편 운영팀: 장부 정리부터 밤샘 에이전트까지, 지금 보고 계신 글이에요
• 5편 종합편: 네 부서 열아홉 판과 마지막 한판승부

경기 기록은 해외 유튜버 두 명의 대결 영상, 레딧의 에이전트 시험 기록과 구독 한도 실측 글, 한국 유튜버 한 분의 정리에서 가져왔어요. 이번 편은 네이트 허크의 영상에서 세 판이 나와요. 한 심판에 쏠린 판은 미리 밝혀 둘게요. 움직이는 화면은 원본 영상에서 몇 초씩 잘라 두 배속으로 넣었어요. 한쪽 편만 들지 않으려고 반대 결과가 나온 경기도 빼지 않았어요.

오늘의 두 선수

1P. GPT-6 아스트라

아스트라는 챗GPT를 만든 오픈AI의 최신 간판 모델이에요. 오픈AI는 아스트라를 소개하면서 컴퓨터와 브라우저를 직접 조작하는 능력을 가장 앞에 내세웠어요. 컴퓨터를 직접 다루는 시험 OSWorld에서 72.6%를 받았다고도 적었고요¹. 운영 일로 치면 사이트에 로그인해 메뉴를 누르고 파일을 올리고 시트를 채우는 일이에요.

성격은 신중한 편이에요. 오픈AI는 개발자 안내에 아스트라가 "이전 모델보다 추측하는 대신 확인을 요청할 가능성이 크다"고 적었어요³. 이번 편 1판에서 그 버릇이 정확히 나와요. 그런데 5판에서는 정반대 얼굴을 보여 줘요.

2P. 클로드 페이블 5.1

페이블은 클로드를 만든 앤트로픽의 최상위 모델이에요. 앤트로픽은 페이블이 코딩, 지식 업무, 오래 걸리는 문제 풀기에 뛰어나다고 소개했어요². 오래 걸리는 일이라는 말이 이번 편 5판에서 시험대에 올라요.

성격은 아스트라와 반대로 적극적이에요. 앤트로픽은 페이블이 과제를 받으면 "요청한 것을 해내고, 가끔은 그 이상을 한다"고 적었어요⁴. 시킨 것보다 더 해 오는 버릇은 1판에서도 나와요. 다만 사람이 안 볼 때는 그 버릇이 다르게 나와요.

먼저 묻는 쪽 vs 더 해 오는 쪽. 사람이 자리를 비운 밤에도 같은 버릇일까요? 👀

1판. 세금 정리해 줘

세금 정리는 운영팀에서 제일 무서운 종목이에요. 숫자가 많고 빠뜨리면 안 되고 나중에 틀린 걸 알면 되돌리기 어려워요. 네이트 허크의 말을 빌리면 "아주 똑똑하면서도 믿을 수 있는 쪽"에 맡기고 싶은 일이에요⁵.

1경기. 상반기 거래 내역으로 세금 예상하기

심판은 네이트 허크예요. 자기가 평소에 하는 일 15가지를 골라 두 모델에게 똑같이 시키고 그 영상을 올렸어요. 이 글의 세 판이 거기서 나와요⁵.

숙제는 올해 1월부터 6월까지, 그러니까 1분기와 2분기 자료를 뒤져서 연방세와 주세를 정리하고 남은 기간 세금을 예상하는 일이었어요. 네이트는 개인 회사 여러 개로 세금을 내는 구조라서 계산이 복잡해요⁵.

아스트라는 시작하기 전에 일곱 개를 물었어요. 페이블은 그냥 달렸어요.

네이트는 이 차이만으로 "아스트라 결과가 더 믿음이 간다"고 했어요. 자기 상황에 맞춰 물었으니까요⁵.

페이블의 결과물은 나쁘지 않았어요. 손익, 남은 기간 예상 납부액, 개인 신고와 회사별 세금 계산, 납부 내역, 확인이 필요한 항목, 참고한 출처까지 있었어요. 다만 한 가지가 달랐어요. 묻는 대신 "당신이 이 경우면 이렇게 하고, 저 경우면 저렇게 하라"는 분기표를 줬어요. 네이트는 "예전에 비하면 몇 광년은 앞선 결과물"이라면서도 그 부분에서 아쉬워했어요⁵.

아스트라의 결과물은 "여기서 시작하세요"로 열려요. 월별 실적, 세금 예측, 납부 내역, 입력값과 미결 항목, 출처 확인, 거래 원장이 이어져요. 그 원장을 열자 네이트가 놀랐어요.

"세상에, 이건 수천 줄이잖아." 거래 3,739줄이 한 시트에 들어 있었어요. 📊

네이트는 "훨씬 더 맞춤형이고 읽기도 쉽다"고 했어요. 미결 항목을 따로 뽑아 둔 것도 좋아했고요⁵.

이긴 쪽이 두 배 가까이 오래 걸리고 돈도 더 썼어요. 네이트는 "비용은 일단 옆에 두자"며 결과물로만 판정했어요⁵.

네이트 허크의 한 줄 평"이건 의문의 여지 없이 아스트라. 더 맞춤형이었고 질문을 해 줬고, 세금만큼은 그게 믿음을 줬다. 결과물 구조도 더 좋았다."⁵

아스트라+1 🎉

1경기 끝1 : 0

페이블

1판 최종 결과

ROUND 1세금 정리

1승 0패

시작 전에 일곱 개를 묻고 거래 3,739줄을 한 시트에 담았어요. 대신 두 배 가까이 오래 걸리고 9달러 더 썼어요.

0승 1패

빠르고 쌌고 결과물도 갖출 건 다 갖췄어요. 다만 묻는 대신 "이 경우면 이렇게"라는 분기표를 줬어요.

1판 승자: 아스트라. 이 판은 경기가 하나뿐이에요. 심판이 한 명이라는 것도 같이 보세요.

그래서 나는 뭘 써야 해요?

🧾 월말 장부, 세금 예비 정리처럼 빠뜨리면 안 되는 숫자 일이라면 아스트라

처음에 질문이 쏟아져요. 그걸 귀찮아하지 말고 답해 주세요. 그 답이 결과물의 "맞춤" 부분이 돼요. 시간은 넉넉히 잡으세요.

⚡ 30분 안에 초안만 필요하다면 페이블

절반 시간에 절반 값이에요. 대신 "내 상황은 이렇다"를 지시문에 먼저 적어 주세요. 안 적으면 분기표가 돌아와요.

2판. 구독료 찾아 줘

회사 카드로 나가는 구독료는 운영팀의 숨은 적이에요. 쓰지도 않는 도구가 매달 빠져나가고 같은 서비스에 두 번 결제되고 가격이 슬쩍 올라도 아무도 몰라요. 이걸 찾으려면 메일함을 몇 년 치 뒤져야 해요.

1경기. 메일 두 계정에서 구독료 전수 조사

다시 네이트 허크의 경기장이에요. 이번엔 자기 메일 계정 두 개를 통째로 열어 주고 이렇게 시켰어요⁵.

수년 치 메일을 뒤져서 내가 돈을 내고 있는 구독을 찾아 줘. 총 얼마를 냈는지, 가격이 올랐는지, 해지해야 할 게 뭔지도.

페이블의 시트부터 열었어요. 첫 탭은 감사 요약이에요. 어떤 메일을 봤는지, 멤버십·프로그램·고문료·외주·보험 같은 종류별 정리, 상위 10개, 시트 읽는 법까지 있어요. 활성 구독 탭에는 어느 메일에 연결됐는지, 매달 며칠에 청구되는지, 현재 가격과 월 환산액이 나와요. 표시 탭에는 미납, 가격 인상, 좌석 늘어남, 두 계정에 같은 구독 같은 문제에 우선순위를 매겨 뒀어요⁵.

그리고 "전체 결제 내역" 탭을 눌렀어요. 비어 있었어요.

네이트는 "왜인지 모르겠는데 이 시트는 완전히 비어 있다"고 했어요. 외주와 큰 결제 탭은 다시 정상이었고요⁵.

아스트라의 시트는 첫 탭에 현재 반복 결제 기준액과 연 환산액, 도구 결제, 확인 안 된 청구서, 클로드 사용료, 기타 청구, 가격 변동을 요약했어요. 우선 검토 항목엔 할인 종료, 계약 등급, 가격 인상, 약관 변경, 좌석과 도구 중복이 표시돼 있었고요. 구독 목록에는 가격과 마지막 청구, 다음 청구일이 있었어요. 그리고 페이블이 비워 둔 그 탭, 전체 결제 내역이 한 건씩 다 들어 있었어요⁵.

네이트는 두 모델이 구글 시트를 다루는 버릇이 다르다고도 짚었어요. 아스트라는 셀을 크고 넓게 만들고 페이블은 기본 크기를 유지한대요⁵.

네이트 허크의 한 줄 평"아스트라 결과물이 더 낫다. 페이블은 시트 하나를 완전히 망쳤고 아스트라가 더 쌌다. 12.5달러 대 50달러. 말이 안 된다. 그 결과에 50달러라니."⁵

시간은 페이블이 빨랐어요. 17분 대 30분이에요. 그런데 돈은 네 배 가까이 더 썼어요⁵.

아스트라+1 🎉

1경기 끝1 : 0

페이블

점수판과 시트 화면은 네이트 허크 유튜브 영상 캡처예요. 재무 정보는 원본 영상에서 이미 가려져 있어요.

2판 최종 결과

ROUND 2구독료 찾기

1승 0패

할인 종료와 약관 변경까지 표시했고 결제 내역을 한 건씩 다 채웠어요. 12.54달러예요.

0승 1패

문제 표시와 우선순위는 좋았어요. 그런데 전체 결제 탭이 비었고 49.19달러가 나갔어요.

2판 승자: 아스트라. 이 판도 경기가 하나예요. 빈 시트 하나와 네 배 비용이 승부를 갈랐어요.

그래서 나는 뭘 써야 해요?

📬 메일함에서 결제 내역을 뽑아 정리하는 일이라면 아스트라

빠뜨리면 안 되는 목록을 끝까지 채웠고 값도 쌌어요. 결과 시트는 탭마다 열어서 빈 곳이 없는지 한 번 확인하세요.

🧾 어느 쪽이든 "빈 탭이 있으면 이유를 적어"라고 지시하세요

페이블은 좋은 시트를 만들고도 탭 하나를 비워 둔 채 끝냈어요. 왜 비었는지 한 줄만 있었어도 판정이 달라졌을 거예요.

3판. 메일함 정리해 줘

받은 메일을 읽고 급한 것과 아닌 것을 나누고 답장 초안을 써 두는 일. 운영팀이 매일 아침 제일 먼저 붙잡는 일이에요. 이번 판은 결과물 사진이 없어요. 두 심판 다 화면을 보여 줄 필요가 없다고 판단했거든요. 왜인지는 곧 나와요.

1경기. 매일 쓰는 이메일 분류 스킬

심판은 폴 립스키예요. 조회수 13만 회 영상에서 자기가 매일 쓰는 이메일 분류 스킬을 두 모델에게 그대로 돌려 봤어요. 메일함을 훑어서 각 메일을 어떻게 처리할지 정하고 답장 초안을 쓰되 보내지는 말라는 스킬이에요⁶.

결과는 둘 다 잘했어요. 그래서 폴이 한 말이 이 경기의 전부예요.

폴 립스키의 한 줄 평"놀랍지 않게 둘 다 아주 잘했다. 그런데 메일 같은 일에 GPT-6나 페이블 5를 쓰는 건 과하다. GPT-5.6이나 클로드 오퍼스 같은 더 약한 모델로도 훌륭한 결과가 나온다."⁶

아스트라

1경기 끝 · 무승부0 : 0

페이블

2경기. 아침 브리핑과 분류, 블라인드로 읽어 보기

두 번째 심판은 레딧 r/better_claw에 시험 기록을 올린 에이전트 운영자예요. 자기 에이전트가 하루에 수십 번 하는 일, 그러니까 아침 브리핑, 메일 분류, 초안 작성, 자료 요약, 단순 도구 호출을 두 모델과 한 단계 아래 모델 소넷 5에게 똑같이 시켰어요⁷.

"블라인드로 읽으면 셋을 구별할 수 없다." 🙈

이 글에서 두 번째로 나온 "이 일엔 최상위 모델이 필요 없다"는 판정이에요. 운영자는 이런 일에는 소넷 5가 아스트라의 4분의 1 값에 같은 결과를 낸다고 썼어요. 그러니 이 경기도 승자가 없어요⁷.

아스트라

2경기 끝 · 무승부0 : 0

페이블

3판 최종 결과

ROUND 3메일함 정리

2무

잘했어요. 그런데 한 단계 아래 모델과 구별이 안 됐어요.

2무

잘했어요. 그런데 역시 한 단계 아래 모델과 구별이 안 됐어요.

3판 무승부. 심판 둘이 같은 말을 했어요. 이 일은 제일 비싼 선수를 부를 일이 아니에요.

그래서 나는 뭘 써야 해요?

📥 메일 분류, 답장 초안, 회의록 요약은 한 단계 아래 모델

GPT-5.6 솔이나 클로드 오퍼스 5로 충분해요. 오픈AI와 앤트로픽도 일상 업무엔 아래 모델을, 최상위 모델은 어려운 일에만 쓰라고 안내해요³. 한도와 돈을 여기서 아껴 두면 1판과 2판 같은 일에 쓸 수 있어요.

4판. 사이트에 올려 줘

운영팀 일 중에 제일 지루한 종목이에요. 그룹웨어에 같은 양식을 반복해 넣고 커뮤니티 페이지에 자료를 올리고 사이트 메뉴를 눌러 설정을 바꿔요. AI가 문서를 아무리 잘 써도 이 단계를 못 넘으면 결국 사람이 해야 해요.

1경기. 강의 다섯 개를 커뮤니티에 초안으로 올리기

다시 네이트 허크예요. 새 강의 내용을 정리한 문서를 주고 이렇게 시켰어요⁵.

이 새 강의를 무료 커뮤니티에 초안으로 올려 줘. 브라우저를 직접 써서.

두 모델은 스쿨이라는 커뮤니티 사이트에 들어가 강의실 메뉴를 열고 각자 초안 강좌를 만들었어요. 강의마다 설명, 핵심 포인트, 핵심 인용, 자료 링크를 넣고 영상까지 올려야 했어요. 네이트는 첫 다섯 개만 하라고 했고요⁵.

아스트라의 강좌를 열자 다섯 강의가 영상과 함께 들어 있었어요. 화면을 돌아다니며 새 페이지를 만들고 영상을 넣고 글을 채우고 초안으로 저장하는 걸 다 해냈어요. 네이트는 "정말 좋아 보인다"고 했어요⁵.

페이블의 강좌를 열자 영상이 하나도 없었어요.

페이블은 페이지 정리는 오히려 더 나았어요. 강의에 번호가 붙어 있고 구조가 보기 좋았어요. 그런데 영상 업로드에서 막혔어요. 파일을 내려받아 올리다가 문제가 생겼고 그대로 끝냈어요. 네이트는 "영상도 링크도 다 줬는데"라며 아쉬워했어요⁵.

네이트 허크의 한 줄 평"내 스쿨에서 이 일을 여러 번 해 봤다. 5.6 솔에 브라우저 조작을 붙여서도 해 봤고. 브라우저 작업은 코덱스와 GPT 모델이 확실히 낫다. 시간과 비용도 비슷했고 결과는 아스트라가 훨씬 좋았다."⁵

아스트라+1 🎉

1경기 끝1 : 0

페이블

움직이는 화면은 네이트 허크 유튜브 영상에서 몇 초씩 잘라 두 배 빠르게 돌렸어요. 소리는 뺐어요.

4판 최종 결과

ROUND 4사이트에 올리기

1승 0패

페이지를 만들고 영상을 넣고 초안 저장까지 끝냈어요. 더 빨랐고 조금 더 쌌어요.

0승 1패

페이지 구조는 더 보기 좋았어요. 그런데 영상 업로드에서 막혀 끝까지 못 갔어요.

4판 승자: 아스트라. 3편 캔바 경기와 결론이 같아요. 화면을 직접 눌러야 끝나는 일은 아스트라예요.

그래서 나는 뭘 써야 해요?

🖱️ 그룹웨어 입력, 사이트 업로드, 브라우저를 열어야 끝나는 일이라면 아스트라

3편 캔바에 이어 두 번째로 같은 결과예요. 파일을 넣어야 하는 일은 특히 그래요. 다만 저장 전에 마지막 화면은 사람이 한 번 보세요.

📝 올릴 글의 구조와 정리만 필요하다면 페이블의 정리를 받아 사람이 올려도 돼요

페이블의 페이지 정리는 네이트도 더 낫다고 했어요. 업로드만 사람이 하면 돼요.

5판. 밤새 혼자 돌려 줘

운영팀이 요즘 제일 많이 세우는 게 이런 자동 작업이에요. 아침마다 자료를 모아 요약하고 메일을 분류하고 정해진 순서로 도구를 부르는 에이전트예요. 이 판의 승부는 잘하느냐가 아니에요. 사람이 안 볼 때 얼마나 예측 가능하게 구느냐예요.

1경기. 에이전트 시험 다섯 가지 🧪

심판은 앞서 나온 레딧 r/better_claw의 에이전트 운영자예요. 새 모델이 나올 때마다 똑같은 시험 다섯 가지를 치러요. 이번엔 아스트라 출시 몇 시간 뒤에 돌리고 결과를 올렸어요. 추천 125개를 받은 글이에요. 비교 대상으로 한 단계 아래 모델 소넷 5도 같이 넣었지만 이 글은 두 선수 결과만 옮겨요. 운영자 스스로 "하루 만의 한 세션 기록이지 일주일 시험이 아니다. 첫 신호로 봐 달라"고 적어 뒀어요⁷.

2번 시험이 이 편의 핵심 장면이에요. 앞 세 편의 성격이 여기서 뒤집혀요.

앞 편들에서 먼저 묻는 쪽은 늘 아스트라였어요. 그런데 사람이 안 보는 자동 작업에서 4단계 링크가 죽자 아스트라는 묻지 않았어요. 실패를 보고한 다음 시키지 않은 우회로를 스스로 찾아 다른 자료원으로 일부를 해냈어요. 운영자는 "인상적인 자율성"이라면서 바로 덧붙였어요. "동시에 걱정된다. 나는 우회로를 찾으라고 한 적이 없고, 실제 운영에서 그 주도성은 엉뚱한 곳으로 갈 수 있다."⁷

페이블은 실패를 보고하고 대안을 제안한 뒤 멈췄어요. 승인 게이트가 지켜졌어요. 운영자는 이렇게 정리했어요. 밤새 무인으로 돌린다면 "실패하면 멈추는" 쪽이 제일 안전하고, "실패하면 다른 걸 시도하는" 아스트라가 제일 유능하고, "실패하면 제안하는" 페이블이 그 중간이라고요⁷.

1번 시험도 운영팀에겐 뼈아파요. 아스트라의 두 번 실패는 답이 틀린 게 아니었어요. 답 앞에 생각 과정이 딸려 나와서 프로그램이 못 읽었어요. 오픈AI도 아스트라가 단계별 추론을 감추거나 다르게 보이게 할 가능성이 크다고 밝혔어요. 운영자는 그게 이렇게 새어 나온 거라고 풀이했어요⁷.

비용 차이의 이유도 적혀 있어요. 두 모델의 정가는 입력 100만 토큰당 10달러, 출력 50달러로 같아요. 그런데 에이전트는 매번 같은 지시문과 기록을 다시 읽어서 입력의 80~95%가 캐시예요. 그 캐시 입력 단가가 아스트라 1달러, 페이블 0.25달러예요. 정가는 같은데 청구서에서는 페이블이 싸게 나와요⁷.

레딧 운영자의 한 줄 평"아스트라는 에이전트 시험마다 1등이다. 그런데 과제당 비용은 1.7배에서 4배다. 내 에이전트가 하루 종일 하는 일에서 그 값을 하느냐고 물으면, 오늘 시험으로는 아니다. 페이블은 승격용 모델로 남기고 아스트라는 지켜보는 칸에 둔다. 기본 모델은 안 바꾼다. 오늘은 아니다."⁷

시험 다섯 가지 중 페이블 둘, 무승부 둘, 무인 운영 기준으로 페이블 하나. 이 경기는 페이블이에요. 다만 운영자는 아스트라가 진짜 값을 할 곳도 적어 뒀어요. 브라우저 자동화나 여러 앱을 오가는 컴퓨터 조작이에요. 발표 자료 기준으로 아스트라는 데스크톱 작업을 전작의 절반 남짓한 시간에 끝낸대요. 4판 결과와 맞아떨어지죠⁷.

아스트라

1경기 끝0 : 1

페이블+1 🎉

5판 최종 결과

ROUND 5밤샘 에이전트

0승 1패

막히자 스스로 우회로를 찾았어요. 유능하지만 사람이 안 볼 땐 그게 걱정거리였어요. 형식 앞에 생각이 새어 나온 두 번도요.

1승 0패

50번 다 깨끗한 형식, 막히면 제안하고 승인 대기, 과제당 비용 절반 남짓. 밤에 맡길 선수예요.

5판 승자: 페이블. 하루 만의 기록이라는 단서는 붙어요. 그래도 이 편의 유일한 반전이에요.

그래서 나는 뭘 써야 해요?

🌙 사람이 안 보는 동안 도는 자동 작업이라면 페이블

정해진 형식을 지키고 막히면 승인을 기다렸어요. 같은 지시문을 반복해 읽는 일이라 캐시 단가 차이도 청구서에 그대로 나와요.

🛑 아스트라에게 자동 작업을 맡긴다면 "막히면 우회하지 말고 멈춰서 보고해"를 지시문에 박으세요

시키지 않은 우회로는 낮에는 장점이고 밤에는 사고예요. 형식이 중요한 일이면 "답 앞에 설명을 붙이지 마"도 같이요.

다섯 판 최종 결과 🏆

3 대 1, 아스트라. 두 편 연속이에요. 🏁

다만 이 전적도 이 글이 매긴 거예요. 이번 편은 열 경기 중 셋이 네이트 허크 한 사람의 영상에서 왔고 5판은 하루 만의 레딧 기록이에요. 대부분 지시 한 번에 나온 첫 결과물이고요. 판마다 무엇으로 갈렸는지는 이래요.

• 1판: 시작 전에 일곱 번 물은 쪽이 3,739줄 원장을 냈어요. 대신 두 배 가까이 오래 걸리고 9달러 더 썼어요
• 2판: 빈 시트 하나와 네 배 비용이 갈랐어요. 12.54달러 대 49.19달러예요
• 3판: 심판 둘 다 "이 일엔 최상위 모델이 과하다"고 했어요. 승자가 없어요
• 4판: 영상 업로드에서 한쪽이 멈췄어요. 3편의 캔바와 같은 결론이에요
• 5판: 형식 50번 중 50번, 막히면 승인 대기, 과제당 비용 절반 남짓. 페이블이에요

그런데 전적보다 더 재밌는 게 있어요. 사람이 보는 낮과 안 보는 밤에서 성격이 뒤집혔어요.

• 아스트라가 이긴 곳: 세금, 구독료, 사이트 업로드처럼 사람이 옆에서 질문에 답해 주고 결과를 바로 확인하는 일
• 페이블이 이긴 곳: 밤새 도는 자동 작업처럼 사람이 없고 형식과 멈춤이 중요한 일

낮에는 먼저 묻는 아스트라가 믿음직했고 밤에는 승인을 기다리는 페이블이 안전했어요.

번외. 증언대 🎤 한도, 반복 입력, 그리고 총합

점수에 넣지 않은 기록이에요. 운영팀이 돈과 한도를 셈할 때 같이 봐야 할 장면이고요.

세 기록을 겹쳐 보면 운영팀의 셈법이 나와요. 비싼 선수는 막힌 곳에만 부르고, 반복되는 일은 아래 모델로, 밤에 도는 일은 캐시 단가로 고른다. 이번 편의 3판과 5판이 그 셈법 그대로예요.

왜 이렇게 갈릴까? 묻는 버릇은 시작할 때, 달리는 버릇은 도중에

시작부터 볼까요. 1판에서 아스트라는 일곱 개를 묻고 나서야 움직였어요. 오픈AI가 개발자 안내에 적은 "추측하는 대신 확인을 요청할 가능성이 크다"는 성격 그대로예요³. 페이블은 묻지 않고 달렸고 빈 곳을 분기표로 메웠어요. 앤트로픽이 적은 "요청한 것을 해내고 가끔은 그 이상"이라는 성격이고요⁴. 사람이 옆에서 답해 줄 수 있는 낮 일에서는 묻는 쪽이 이겼어요.

그런데 5판에서는 반대였어요. 4단계 링크가 죽자 아스트라는 묻지 않고 우회로를 찾았고 페이블은 대안을 제안한 뒤 승인을 기다렸어요⁷. 같은 두 모델인데 왜 뒤집혔을까요. 묻는 시점이 달라서예요. 아스트라의 질문은 일을 시작하기 전에 몰려 있고 일단 시작하면 끝까지 스스로 가요. 페이블은 시작할 땐 안 묻지만 도중에 막히면 사람을 찾아요. 사람이 없는 밤에는 뒤쪽 버릇이 안전했어요.

도구 이야기도 있어요. 오픈AI는 아스트라의 컴퓨터·브라우저 조작을 가장 앞에 내세웠고 OSWorld 72.6%라는 숫자를 붙였어요¹. 4판의 영상 업로드가 정확히 그 능력이에요. 3편의 캔바에 이어 두 번째로 같은 결과가 나왔으니 우연은 아니에요⁵.

돈은 이번에도 한쪽으로 안 기울었어요. 1판은 이긴 아스트라가 9달러 더 썼고 2판은 이긴 아스트라가 네 배 쌌어요⁵. 5판은 캐시 단가 차이로 페이블이 쌌고요⁷. 독립 평가에서 페이블이 아스트라보다 출력 토큰을 세 배 넘게 쓴다는 결과와¹⁰¹¹ 캐시 입력 단가가 4분의 1이라는 표는 서로 다른 방향을 가리켜요. 한 번 하는 일은 출력이 적은 쪽이 싸고 같은 문맥을 반복해 읽는 일은 캐시가 싼 쪽이 싸요.

운영팀 배치 결과

다섯 판을 운영팀 업무로 옮기면 이렇게 나뉘어요.

• 아스트라에게: 월말 장부와 세금 예비 정리, 메일함에서 결제 내역 뽑기, 그룹웨어와 커뮤니티에 자료 올리기, 브라우저를 열어야 끝나는 반복 입력
• 페이블에게: 사람이 퇴근한 뒤 도는 자동 작업, 정해진 형식으로 답해야 하는 프로그램 연동, 같은 지시문을 하루 수십 번 읽는 장기 에이전트
• 한 단계 아래 모델에게: 메일 분류, 답장 초안, 아침 브리핑, 회의록 요약. GPT-5.6 솔이나 클로드 오퍼스 5면 충분해요
• 같이 쓴다면: 낮에 아스트라가 자료를 모으고 시트를 채우면, 밤에 페이블이 그 자료로 정해진 작업을 돌리며 승인 지점을 지켜요

지시문도 성격에 맞춰 쓰면 좋아요. 아스트라에게는 처음 질문에 성실히 답하고, 자동 작업이라면 "막히면 우회하지 말고 멈춰서 보고해"와 "답 앞에 설명 붙이지 마"를 적어 주세요. 페이블에게는 "내 상황은 이렇다"를 지시문 맨 앞에 적고 "빈 탭이 있으면 이유를 적어"라고 덧붙이세요³⁴.

한도는 따로 챙기세요. 코덱스에서 아스트라를 돌리면 한 단계 아래 모델보다 한도가 훨씬 빨리 닳는다는 실측이 있어요⁸. 요금제마다 아스트라를 얼마나 쓸 수 있는지는 챗GPT 아스트라 요금제별 사용법과 메시지 한도에 정리했어요.

자주 묻는 것