GPT가 112~114 버전 정도부터 메모리 관련 버그를 제대로 못 잡고 다른 기능 추가 제거가 반복되면서 예상을 넘는 오동작이 늘어나는 것 같습니다. 

코딩시에는 1M 컨텍스트 창 도입 시점부터 이런 현상이 나타났고, 지금도 계속되고 있습니다.

1. 결과보고 A

2. A를 기반으로 B를 지시

3. B수행을 위한 기본 동작을 마친 후 돌연 결과보고 A를 반복하고 멈춤 (결과보고A는 맥락은 같으나 새로 작성된 문장)

4. 다시 지시해도 수시로 과거 보고 반복

발생하는 타이밍은 compact 처리가 여러 번 반복되다가 갑자기 나타납니다. 

예상되는 원인은 컴팩트 처리 중 과거 압축과 직전에 수행하던 부분을 별도로 나누는 과정에서 범위를 잘못 지정하고 있는 듯 합니다. git을 자주 업데이트하고 ssot todo를 별도로 관리하는 식으로 진행하면 새 커맨드 창에서 시작하면 되기 때문에 증상만 정확히 인지하면 문제는 아닙니다. 

( cli 뿐 아니라 채팅버전에서도 전혀 엉뚱한 답변을 한다는 글이 있는데 OpenAi 개발팀이 새로운 수익 발굴이라는 미션에 휘둘려서 기본적인 디버깅 까지 놓치고 있는 것 같아 안타깝습니다.  https://www.clien.net/service/board/park/19177209?od=T31&po=1&category=0&groupCd=CLIEN )

이런 증상 때문에 Opus4.6 에게 작정하고 일을 시켜봤는데, 하루 분량을 4시간 만에 끝냈다고 보고하길래 놀라워 했다가 각종 체크 프로그램만 통과하는 수준으로 와이어링만 해놓고 실제 구현은 안 되거나 잘못되어서 바로 잡는데 이틀을 허비하고 말았습니다. 

별도 IDE 를 쓰지 않는 입장에서, 난이도 있는 코딩은 코덱스 외의 대안이 없기에 빨리 수정이 되었으면 하네요.

한 가지 낭보는 pro에 $100 요금제가 추가되면서 $200 요금제에서의 xhigh 사용시 토큰 소모량이 1/3으로 줄었습니다. 4~5개 창을 띄워서 풀로드를 걸면 하루에 30~35% 가량의 주간소모량을 소진하는데 이틀 전부터 10% 정도 밖에 줄지 않는 모습입니다. 

아마도 $200의 이용 가능한 토큰량이  그다지 크지 않았는데 $100 은 5배, $200은 20배라는 클로드와 동일한 룰을 적용하면서 제공 기본 토큰량이 과거보다 커진 것이 아닌가 생각됩니다.