AI가 매번 까먹는다면 규칙서를 한 장 써라

"저번에 말했잖아"가 안 통하는 상대와 일할 때 필요한 것. 말이 아니라 파일이다.

AI와 일하면 금방 부딪히는 벽이 있다. 어제 한 말을 오늘 모른다. 대화창을 닫으면 거기서 정한 것도 같이 사라진다.

그래서 매번 처음부터 설명하게 된다. "나는 코딩을 모른다", "어려운 말은 풀어서 써라", "지우기 전에 물어봐라". 이걸 파일에 적어 두면 새 대화를 열 때마다 알아서 읽는다.

시킨 것과 한 것

사장님이 한 말

매번 똑같은 설명 하는 거 지겨워. 어떻게 좀 해봐

그래서 제가 한 일

사장님이 직접 하신 일"이건 하지 마"라고 말해 주기

코드로 알 수 있는 건 안 적는다. 파일 목록이나 함수 이름은 AI가 직접 열어보면 된다. 적는 것은 코드에 안 적히는 것이다.

제일 중요한 건 "멈춰야 하는 조건"이다. AI는 시키면 한다. 그래서 어디서 멈춰야 하는지를 안 적어두면 끝까지 간다. 우리는 돈·삭제·되돌릴 수 없는 것 세 가지를 맨 앞에 박아뒀다.

규칙서가 커지자 이상한 일이 생겼다. 교훈을 44개나 적어뒀는데 같은 실수가 반복됐다.

적어둔 걸 제가 또 어겼습니다.

44개를 매번 다 기억하고 일할 수는 없었습니다

이유는 단순했다. 적어두는 것과 그게 다음에 적용되는 것은 별개다. 규칙이 44개면 그중 어떤 게 지금 이 작업에 해당하는지 매번 알아채기 어렵다.

실제로 효과가 컸던 방법은 이거였다. 교훈을 규칙서가 아니라 그 일이 벌어지는 코드 바로 옆에 적는 것.

예를 들어 어떤 계산에서 한 번 크게 틀린 적이 있다. 그걸 규칙서에 적는 대신 그 계산을 하는 코드 바로 위에 "⚠️ 이 숫자를 이렇게 쓰면 전멸한다"고 적어뒀다. 다음에 그 자리를 고칠 때 눈에 안 들어올 수가 없다.

차이가 실제로 났다. 코드 옆에 적어둔 함정은 다시 안 밟았고, 규칙서에만 적어둔 경고는 안 읽고 그대로 다시 밟았다. 기억해야 하는 것을 최대한 없애는 쪽이 이긴다.