코딩도 자동화 도구도 없이 AI 팀원 다섯을 만들었더니, 같은 의뢰에서 결론이 세 번 뒤집혔습니다.

혼자 일하는 사람이 AI에게 무언가를 물을 때, 진짜 필요한 건 답이 아닙니다. 답은 이미 있어요. 필요한 건 그 답이 틀렸다고 말해줄 사람이죠.

그런데 AI와 한 창에서 길게 대화해 보신 분은 아실 거예요. 스무 번쯤 주고받고 나온 최종 결론이, 내가 처음에 던진 말과 대체로 같습니다. 중간에 근거가 붙고 구조가 잡히고 표가 생기지만, 방향은 잘 안 바뀌어요.

AI가 사용자 말에 호응하려는 면도 있습니다. 그런데 확인해보니 그것만이 아니었어요.

첫 답이 나오는 순간, 그 뒤의 모든 대화가 그 답 위에서 굴러갑니다. 제가 던지는 다음 질문부터가 앞 답을 맞다고 치고 만들어지거든요. AI도 그 답을 자기가 낸 것으로 기억하고 있고요. 그래서 스무 번을 주고받아도 검증이 아니라 보강이 됩니다.

한 창 안에서는 아무리 잘 물어도 안 되는 구조예요. 프롬프트를 더 잘 쓰는 걸로는 해결이 안 됩니다.

그래서 창을 하나 쓰는 대신, 폴더를 하나 만들었습니다.

대화창 하나를, 폴더 하나로 바꿨습니다

만드는 데 필요한 건 세 가지뿐이에요.

하나, 폴더를 만듭니다. 안에 팀원 수만큼 하위 폴더를 만들고, 각자의 지침을 마크다운 파일로 넣습니다. 지침은 "너는 무엇을 하는 사람이고, 무엇은 하지 않는다"를 적은 텍스트 파일이에요.

둘, Claude의 Cowork에 그 폴더를 지정합니다. 그러면 Claude가 폴더 안의 파일을 읽고 쓸 수 있게 됩니다.

셋, 순서대로 부릅니다. 1번 팀원에게 일을 시키면 산출물이 폴더에 파일로 쌓여요. 2번을 부르면 그 파일을 읽고 시작합니다.

워크플로 자동화 도구도, 벡터DB도, API 연결도 안 씁니다. 텍스트 파일과 폴더가 전부예요.

이 방식의 핵심은 앞사람의 결론이 파일로만 넘어간다는 겁니다. 대화 맥락은 안 넘어가요.

그래서 2번 팀원은 1번이 얼마나 확신했는지를 모릅니다. 어떤 근거를 버리면서 그 결론에 도달했는지도 몰라요. 파일에 적힌 결론과 근거만 받습니다. 자기가 낸 답이 아니니까, 시키지 않아도 의심하면서 읽어요.

이게 한 창에서 이어갈 때와 갈리는 지점입니다.

실제로 돌려봤습니다

1인 D2C 브랜드가 흔히 겪는 상황 하나를 케이스로 만들었어요. 수제 원목 도마를 파는 브랜드입니다. 인스타 팔로워가 1년 새 8천에서 2만 4천으로 늘었는데 월 매출은 7개월째 1,900만 원에서 안 움직여요. 대표는 "콘텐츠가 소모되는 느낌이라 숏폼 편집자를 뽑아 릴스를 주 4회에서 8회로 늘릴까 한다"고 물었습니다.

먼저 밝혀둘 것. 이 브랜드의 이름과 내부 수치는 설정값입니다. 다만 벤치마크 수치와 업계 실측치는 실제로 조사해 원출처까지 추적한 것이고, 아래에서 결론이 뒤집히는 과정은 각색하지 않았어요.

팀원은 다섯으로 나눴습니다. 해석가, 리서처, 전략가, 실행설계자, 팀장이에요.

결과부터 말씀드리면, 다섯을 지나는 동안 결론이 세 번 뒤집혔습니다.

아래에서 각 팀원이 무엇을 봤는지 보실 텐데, 세 번의 뒤집기가 어디서 났는지만 따라가시면 됩니다.

1. 해석가

받은 질문을 그대로 풀지 않는 자리예요. 조사도 안 하고 전략도 안 세웁니다. "지금 물어야 할 게 이게 맞나"만 봐요.

가져온 요구는 "릴스를 2배로"였는데, 숫자는 정반대를 가리켰습니다. 전환율은 분수예요. 분모가 세션, 분자가 주문이죠. 매출이 7개월째 그대로인데 전환율만 절반으로 떨어졌다는 건, 계산하면 분모가 1.8배 늘고 분자는 제자리였다는 뜻입니다.

유입은 이미 충분히 늘었고, 늘어난 그 유입이 사지 않고 있었어요. 릴스를 2배로 늘리는 건 이미 넘치는 쪽을 더 늘리는 일이고, 편집자 채용은 그걸 매달 나가는 고정비로 만드는 일입니다.

첫 번째 뒤집기. "콘텐츠가 모자라다"가 "이미 넘친다"로 바뀌었습니다.

해석가는 여기서 답을 내지 않아요. 가능한 원인 5개와 각각의 확신도, "이 가설이 틀렸다면 어떤 숫자가 나와야 하는지"를 파일로 남기고 넘깁니다.

2. 리서처

앞사람이 세운 가설을 데이터로 검증하는 자리입니다. 지침에서 제일 중요한 문장은 "못 찾은 건 공백으로 남긴다"예요. 자료가 없으면 추정으로 메우지 않고 빈칸으로 넘깁니다.

해석가의 진단은 실측으로 통과됐어요. 그런데 통과시키면서, 가장 큰 구멍이 해석가가 지목한 곳이 아니라는 걸 찾아냈습니다.

유입원별로 퍼널을 다시 계산했더니 인스타에서 들어온 사람은 상품 상세를 19초 보고 14%만 스크롤하고 나갑니다. 네이버 검색에서 들어온 사람은 1분 47초를 보고 68%가 스크롤해요. 장바구니에 담는 비율이 3.76배 차이 납니다.

즉 상세페이지의 설명이 부족해서 설득이 안 된 게 아니라, 애초에 읽지를 않고 나가요. 상세페이지를 아무리 잘 고쳐도 19초 안에는 안 읽힙니다.

두 번째 뒤집기. 여기가 제일 아슬아슬했던 자리예요. 이 데이터만 보고 멈췄으면 "인스타 팔로워는 통째로 안 사는 사람들"이라는 결론이 나왔을 겁니다. 그럼 처방은 "채널을 갈아타라"가 됐겠죠.

그런데 리서처 지침에는 "표 하나만 보고 결론 내리지 말 것"이 적혀 있어요. 그래서 하나를 더 봤습니다. 같은 인스타 계정 안에서도, 어느 게시물을 보고 들어왔느냐에 따라 구매율이 4.76배 갈립니다. 팔로워 전체가 안 사는 사람들이었다면 이 차이가 안 나와요.

팔로워가 문제가 아니라, 스타일링 사진만 올리다 보니 구경만 하는 사람들 위주로 유입되고 있었던 겁니다. 올리는 콘텐츠를 바꾸면 같은 계정에서 다른 사람이 들어와요. 더 만들 필요가 없고, 만들던 걸 바꾸면 됩니다.

3. 전략가

할 일 목록보다 버릴 목록을 먼저 쓰는 자리예요.

전략 브리프는 이렇게 시작합니다. "올해 이 브랜드는 아무것도 새로 만들지 않는다."

신제품, 신규 SKU, 편집자 채용, 숏츠, 새 채널을 전부 버렸어요. 대신 이미 있는 세 가지만 팝니다. 장바구니에 담겨 있는 1,980건, 선물용으로 사고 있는 주문 18%, 저장·공유하고 있는 2만 4천 명.

배송비 판단도 여기서 나왔습니다. 배송비는 이탈 사유 1위(31%)고 경쟁사는 다 무료배송이니 없애야 할 것 같은데, 이 회사 순마진이 411만 원이에요. 전면 무료배송을 하면 주문이 얼마나 늘어야 본전인지 계산했더니 배송비 4,000원 기준으로 주문이 33% 늘어야 합니다. 업계 평균 개선폭보다 높아요. 즉 무조건 하면 손해 볼 확률이 큽니다.

그런데 선물용 주문의 객단가는 이미 94,000원입니다. 전체 평균보다 28.8% 높아요. 그래서 나온 결론이 “전 상품 무료배송 대신, 선물 포장 옵션을 붙여 객단가를 올리고 그 돈으로 배송비를 흡수한다”입니다. 배송비 문제와 선물 수요를 한 번에 처리한 거예요.

4. 실행설계자

전략을 주차별 일정으로 옮기되, 안 되면 안 된다고 보고하는 자리입니다. 앞사람 전략을 예쁘게 포장하는 자리가 아니에요. 실제로 여기서 앞 전략의 문제 8건이 지적됐고, 실행 불가 판정도 2건 나왔습니다.

그중 하나가 이거예요. 앞선 두 명이 "이 대표는 콘텐츠에 주 20시간을 쓰고 있고 여기서 더 못 늘린다"를 전제로 깔았는데, 그 20시간이 어디에 쓰이는지는 아무도 안 봤습니다.

뜯어보니 세팅·촬영 7시간, 편집 6시간이었어요. 발행 횟수를 절반으로 줄이고 콘텐츠 종류를 바꾸면 주 20시간이 7.5시간이 됩니다. 못 줄인다고 믿었던 20시간이 사실은 가장 크게 줄일 수 있는 항목이었어요. 12.5시간이 그냥 나옵니다.

세 번째 뒤집기. 그리고 실행설계자가 잡은 첫날 할 일이 이겁니다. 본인 몰에서 자기 물건을 사본다. 스마트폰으로, 인스타 프로필 링크를 눌러, 비회원으로, 실제 카드로 결제하고 환불까지. 1.5시간이면 앞선 세 명이 확인 못 하고 넘긴 질문 3건이 한 번에 닫힙니다.

5. 팀장

새 결론을 안 내는 자리예요. 앞의 넷이 서로에게 넘긴 것들이 제대로 물렸는지, 누가 남의 영역을 침범했는지, 봐야 할 걸 안 본 사람은 없는지만 봅니다.

여기서 나온 게 이 실험에서 제일 쓸모 있는 문서였어요.

팀이 틀렸을 수 있는 지점 7건을 적어뒀습니다. 맨 위 항목은 1순위 결론이 특정 지표의 계산 방식에 의존하고 있고, 그 계산이 틀리면 순위가 바뀔 수 있다는 내용이에요. 대외 공개 전 팩트체크에서 잡힌 팀 자신의 오류 12건도 그대로 남겼습니다.

이걸 낼 수 있는 이유는 단순해요. 팀장은 자기가 낸 결론이 없습니다. 지킬 게 없으니 남의 결론을 깎을 수 있어요.

대화창 하나로 했을 때와 비교하면

같은 의뢰를 한 방 프롬프트로 단일 AI에도 던졌어요. 일부러 못 쓰게 만들지 않았습니다. 최선을 다해 뽑았고, 그 프롬프트도 원문 그대로 공개해 뒀어요.

인정할 것부터 두 개 적을게요.

하나, 단일 AI는 꽤 잘 썼습니다. 큰 오답이 없어요. 편집자 채용을 기각했고, 숏츠도 기각했고, 문제가 유입이 아니라 전환이라는 것도 잡았습니다.

둘, 단일 AI가 팀을 이긴 지점도 하나 있습니다. 단일 AI는 "매출의 채널별 구성을 봐야 한다"고 물었는데, 팀은 해석가가 범위를 자사몰로 좁게 잡는 바람에 매출의 6할을 차지하는 스마트스토어를 한 번도 안 봤어요. 한쪽이 물었고, 다른 쪽은 반만 답했습니다.

그러니 이건 "AI는 멍청하다"는 이야기가 아니에요. 갈린 건 다음 셋입니다.

첫째, 되돌릴 수 없는 결정을 걸러줍니다

이 대표가 검토하던 선택지 중 두 개는 한번 하면 원상복구가 안 됩니다. 편집자를 뽑으면 그 순간부터 매달 인건비가 나가고, 발행량을 절반으로 줄이면 떨어진 도달과 팔로워가 바로 안 돌아와요. 알고리즘이 회복되는 데 2~4주가 걸립니다.

단일 AI는 편집자 채용을 기각하면서 이유를 잘 댔지만, 어떤 결정이 되돌릴 수 있고 어떤 게 없는지는 구분하지 않았습니다. 팀은 실행 계획의 모든 항목에 "되돌리는 데 걸리는 시간"을 붙였어요. 10분이면 원복되는 결정과 4주가 걸리는 결정을 같은 표에 두지 않았습니다.

돈과 시간이 한정된 사람에게는 조언의 정확도보다 이게 큽니다. 틀린 조언은 다시 물어보면 되지만, 뽑은 사람은 다시 못 물러요.

둘째, 실행 순서가 다릅니다

두 답의 순서를 나란히 놓으면 이렇습니다.

팀의 순서는 새로 만든 게 아니에요. 앞의 네 명이 찾아낸 것을 그대로 줄 세운 겁니다.

장바구니에 담은 것의 95%가 결제되지 않으니 결제 화면이 1순위, 선물 주문 객단가가 이미 높으니 선물 오퍼가 2순위, 게시물 종류에 따라 구매율이 4.76배 갈리니 콘텐츠 믹스가 3순위, 전환율이 가장 높은데 유입은 20%뿐인 네이버가 4순위입니다.

기준은 하나였어요. 살 마음을 먹고 온 사람이 어디서 돌아서는지, 그 지점부터 고친다.

단일 AI는 이 기준이 없으니 "매출 = 객단가 × 주문 수"라는 일반 공식에서 출발합니다. 그래서 객단가가 1순위로 올라오고, 실행에 5주가 걸려요. 팀의 1순위는 첫날 1.5시간이면 확인이 끝나고요.

셋째, 자기가 낸 답을 버립니다

세 번의 뒤집기는 전부 앞 단계가 내놓은 답을 폐기하는 판단이었어요.

"릴스를 늘린다"를 버리고, "채널을 갈아탄다"를 버리고, "20시간은 못 줄인다"를 버렸습니다. 한 창에서 이어갔다면 셋 다 안 버려졌을 거예요. 자기가 30분 전에 낸 답이니까요.

AI는 좋은 안을 만드는 걸 아주 잘합니다. 세 개를 뽑으라면 셋 다 만들어요. 그런데 어느 걸 버리냐고 물으면 각각 장단이 있다고 답합니다.

그래서 폴더에 무엇을 적느냐가 전부입니다

폴더를 만드는 데는 반나절도 안 걸립니다. 도구를 고르고, 연결하고, 잘 도는지 테스트하는 과정이 통째로 빠지니까요.

그런데 지침은 아직도 고쳐 쓰고 있어요.

앞에서 나온 세 번의 뒤집기가 전부 지침에 적힌 한 문장에서 났거든요.

• "못 찾은 건 공백으로 남길 것" → 리서처가 추정으로 메우지 않았고, 그래서 빈칸이 다음 사람에게 질문으로 넘어갔어요
• "표 하나만 보고 결론 내리지 말 것" → 두 번째 뒤집기가 여기서 났습니다. 이 문장이 없었으면 "채널을 갈아타라"로 끝났어요
• "안 되면 안 된다고 보고할 것" → 실행설계자가 앞 전략의 문제 8건을 지적할 수 있었던 이유입니다
   

세 문장의 공통점이 하나 있어요. 전부 하지 말라는 말입니다.

지침을 쓸 때 가장 먼저 손이 가는 건 잘하라는 말이에요. 정확하게 조사할 것, 다각도로 검토할 것, 실행 가능성을 고려할 것. 다 맞는 말인데 결과가 안 바뀝니다. AI는 원래 정확하게 조사하려고 하거든요. 읽고 나서 달라질 행동이 없어요.

오른쪽은 AI가 그냥 두면 할 일을 막는 문장이에요. 자료를 못 찾으면 그럴듯하게 메우고, 표 하나로 결론을 내고, 시킨 전략을 어떻게든 되게 만드는 게 기본 동작입니다. 그걸 알고 있어야 막을 수 있어요.

그리고 이게 지침 쓰기가 오래 걸리는 이유입니다. 왼쪽은 누구나 쓸 수 있고, 오른쪽은 그 일을 해보면서 어디서 틀리는지를 본 사람만 쓸 수 있어요. 조사에서 뭘 조심해야 하는지, 전략이 실행에서 어디서 깨지는지를 겪어봐야 문장이 나옵니다.

거꾸로 말하면 폴더 구조는 오늘 따라 만드셔도 되고, 지침은 자기 것으로 채우셔야 한다는 뜻이에요. 남의 지침을 그대로 넣으면 남의 판단이 돌아갑니다.

마지막으로

결론이 세 번 뒤집힌 건 다섯 번 나눴기 때문이 아니에요. 혼자 다섯 번 끊어서 물어도, 다섯 번 다 같은 눈으로 보게 됩니다.

갈린 건 각 자리가 앞사람의 결론을 무엇으로 받았느냐예요.

리서처는 검증할 대상으로 받았고, 전략가는 버릴 후보로 받았고, 실행설계자는 시간표에 올려볼 것으로 받았고, 팀장은 계승이 샜는지 확인할 것으로 받았습니다. 같은 파일을 열어도 무엇을 하러 여는지가 달라요.

그래서 같은 데이터에서 다른 게 보입니다. 리서처는 인스타 유입의 체류 19초를 보고 "이 표만으로 결론 내지 말 것"을 떠올렸고, 실행설계자는 앞의 둘이 제약으로 박아둔 20시간을 보고 "그 안에 뭐가 들었는지"부터 열었어요. 지침이 그렇게 시켰기 때문입니다.

폴더는 그 자리를 만들어주고, 지침이 그 자리에서 무엇을 볼지 정합니다. 앞은 오늘 만들 수 있고, 뒤는 시간이 걸려요.

먼저 확인해보고 싶으시면 오늘 밤 30분이면 됩니다. 지금 하시는 작업의 1단계 답이 나오면, 결론과 근거만 복사해서 새 창에 붙이고 이어가 보세요. 그때 "내가 아까 이렇게 판단했는데 괜찮지?"는 빼고 결론만 넘기시면 됩니다. 결론이 바뀌는지 아닌지가 바로 보여요. 그게 되면 폴더로 옮기시면 되고요.

이 케이스의 5단계 산출물 전문과 단일 AI의 답변 원문은 한 글자도 안 고치고 전부 공개해 뒀습니다. 재현용 프롬프트도 같이 있으니 복사해서 직접 돌려보셔도 돼요.

👉 팀이 실제로 뽑은 리포트 전문 보기 · soloimpact.kr/marketer/case

비슷한 걸 만들어보고 계시거나, 만들다 막힌 지점이 있으면 댓글로 남겨주세요. 저도 팀원 지침을 계속 고쳐 쓰고 있어서, 막힌 얘기가 제일 반갑습니다.