AI 코딩 도구로 이것저것 만들다 보면 자동화가 눈덩이처럼 쌓입니다. 매일 아침 브리핑, 주간 요약, 아이디어 수집, 블로그 초안… 하나씩 만들 때는 다 이유가 있었습니다. 그런데 어느 날 세어 보니 클라우드에서 도는 자동화(GitHub Actions 워크플로)만 34개였습니다. 전체를 한 번에 들여다본 적은 한 번도 없었습니다.
자동화 점검이 보는 세 가지
이럴 때 쓰려고 만들어 둔 Claude Code 스킬이 있습니다. 자동화 전체를 한 번에 펼쳐 놓고 세 가지를 찾습니다.
- 중복 실행 — 같은 일을 하는 자동화가 둘 이상 도는지. 단, 이름만 비슷하고 실제 실행 인자가 다르면 중복이 아닙니다. 그래서 반드시 실행 내용까지 읽습니다.
- 죽은 코드에 살아 있는 스위치 — 실행할 파일은 지웠는데 예약은 남아서, 매번 조용히 실패하는 경우.
- 검토 없는 자동 발행 — 사람 확인 없이 글을 올리거나 배포하는 경로가 있는지.
규칙도 하나 있습니다. 절대 지우지 않습니다. 예약만 끄고(비활성화), 코드는 보관합니다. 잘못 판단했으면 바로 되돌릴 수 있게요.
실제로 찾은 것들
최근 몇 주 동안 이 원칙대로 제 자동화를 점검하면서 실제로 나온 것들입니다.
- “성공”인데 아무것도 안 만든 작업. 매주 월요일 블로그 원고를 만드는 예약 작업이 있었는데, 결과 코드는 매번 “성공(0)”이었습니다. 열어 보니 폴더만 만들고 원고 파일은 66바이트짜리 빈 틀이었습니다. 몇 달째요. 삭제하지 않고 비활성화했습니다.
- 3주째 “재료 없음”인데 초록불. 도구 아이디어를 받아 자동으로 만드는 자동화가 3주 연속 “아이디어가 바닥났다”는 메시지만 남기고 성공으로 끝나고 있었습니다. 메시지는 아무도 안 보는 보관함에 쌓였고요. 자동 제작을 멈추고, 후보만 모아 사람이 고르는 방식으로 바꿨습니다.
- 동시에 돌다 기록이 날아간 사고. 여러 자동화가 같은 기록 파일에 동시에 쓰다가 충돌이 나서, 하루치 기록이 사라졌습니다. 기록 파일은 줄을 합치는 방식으로 병합하도록 설정해 막았습니다.
- 로그인이 풀려도 “성공”. 매일 아침 AI 조언을 만드는 작업이 AI 로그인 만료로 사흘 연속 실패했는데, 예약 작업 결과는 매일 “성공”이었습니다. 이제는 “작업이 끝났나”가 아니라 “결과 파일이 실제로 생겼나”를 보는 점검을 아침마다 돌리고, 문제가 있을 때만 휴대폰으로 알림이 옵니다.
가장 큰 발견은 버그가 아니었다
점검 끝에 가장 크게 남은 숫자는 따로 있었습니다. 34개 중 약 25개가 브리핑·분석·아이디어 같은 “콘텐츠를 만드는” 자동화였고, 30일 동안 든 AI 비용은 대부분 무료 모델이라 1달러 남짓이었습니다. 만드는 건 거의 공짜로 계속 돌아가고 있었습니다.
그런데 정작 저는 그 결과물을 거의 읽지 않고 있었습니다. 자동화는 잘 돌았지만, 그게 제 일이나 삶을 가볍게 해 주지는 않았던 거죠. 고장 난 자동화보다 아무도 쓰지 않는 자동화가 더 큰 문제였습니다.
그래서 방향을 바꿨습니다. 새로 만드는 대신 이미 만든 도구를 일주일에 하나씩 직접 써 보고, 써 본 이야기를 이 블로그에 남기기로 했습니다. 이 글도 그 연재의 하나입니다.
내 자동화를 점검해 보고 싶다면
- 예약 작업은 “성공”이 아니라 “결과물이 생겼는지”로 확인하세요. 둘은 자주 다릅니다.
- 아무도 안 보는 곳(보관함, 아카이브)에만 쌓이는 메시지는 없는 것과 같습니다.
- 정리할 때는 지우지 말고 끄세요. 되돌릴 수 있어야 과감해질 수 있습니다.
- 마지막으로, 각 자동화에 “이 결과를 누가 언제 읽나?”를 물어보세요. 답이 없으면 그게 첫 정리 대상입니다.
스킬 설치
무료로 공개해 두었습니다: agent-automation-audit (GitHub). Claude Code에서 아래 두 줄로 설치하고, “내 자동화 점검해줘”라고 말하면 됩니다.
/plugin marketplace add qkrehgk1-wq/agent-automation-audit
/plugin install agent-automation-audit@agent-automation-audit