개발일지 006: 온갖 시행착오 끝에, 드디어 모델 업데이트 완료

지난번(개발일지 005)에는 AI 모델을 바꾸는 일이 새로운 명리 견습생을 들이는 것과 같아서, 아무리 똑똑해도 규칙을 처음부터 다시 가르쳐야 한다고 썼습니다. 이번 글은 그 후속편입니다——드디어 규칙이 몸에 뱄습니다.

생각보다 훨씬 고된 작업이었습니다. 새 모델을 고르고 설정 한 줄만 바꾸면 끝일 줄 알았는데, 점점 깊이 빠져들어 며칠 밤을 새우고 말았습니다.

작은 약속

저희는 예전부터 여러분과 한 가지 약속을 지켜 왔습니다: 유료 리포트에는 그 시점에 시중에서 가장 강력한 AI 모델을 반드시 쓴다——가장 저렴한 것도, 그럭저럭 쓸 만한 것도 아닌, 지금 가장 뛰어난 모델을요. 그래서 새로운 세대의 플래그십이 나올 때마다 진지하게 평가해 교체합니다. 이번에 올라온 건 현재 최상급인 두 모델입니다.

이번 라인업

• Claude Opus 4.8: 유료 리포트의 새 주력입니다. 가장 마음에 드는 점은 명반에 충실하다는 것. 각 궁을 실제 별·묘왕함·사화에 제대로 연결해 풀어내며, "천동·태음이 낙함"을 예쁘기만 하고 텅 빈 한 문장으로 뭉개 버리지 않습니다. 문장도 섬세해서, 공식을 읊는 게 아니라 정말 당신을 이해하는 사람이 쓴 것처럼 읽힙니다.
• GPT-5.6: 또 하나의 최상급 신세대 모델. 선택지로 함께 연결해 리포트 생성에 한 겹의 안정성을 더했습니다.

왜 이렇게 오래 걸렸나

솔직히, 몇 가지 '보이지 않는 함정' 때문이었습니다.

똑똑한데 출력이 동전 던지기 같은 모델이 있습니다——같은 명반인데도 어떤 때는 날카롭고 깊게, 다음엔 이상하리만치 알맹이가 빠져 명반의 디테일이 전부 사라집니다. 품질을 운에 맡길 수는 없습니다. 돈을 내고 받는 리포트가 복불복이어서는 안 되니까요.

숨겨진 파라미터 규칙을 가진 모델도 있습니다. 설정 하나만 어긋나도 요청 전체가 튕겨 나가 조용히 예비 모델로 넘어가 버립니다. 이런 범인은 실험을 쌓고 변수를 하나씩 꺼 봐야 잡아낼 수 있습니다.

그래서 이번 기간의 대부분은 같은 테스트 명반으로 모델끼리 겨루게 하는 데 썼습니다——문단별로 누가 정확한지, 누가 지어내는지, 누가 안정적인지, 누가 어쩌다 한 번만 잘하는지 비교합니다. 이긴 쪽만 출전할 수 있습니다.

여러분에게 주는 의미

• 해석이 더 정확하면서 문장도 더 좋아졌습니다——각 궁이 따로 노는 게 아니라 하나의 이야기로 이어집니다.
• 리포트 생성 후에도 명반에 없는 내용을 말하지 않았는지 대조하는 단계가 있습니다. 걸리면 다시 쓰고, 그래도 안 되면 크레딧을 환불합니다. 어림짐작으로 쓴 리포트를 드리지 않습니다.

그래도 문제가 생긴다면

어떤 안전장치도 완벽하지는 않습니다. 만약 리포트가 계속 생성되지 않고 멈췄는데 크레딧도 자동으로 환불되지 않은 경우에는, 혼자 감당하지 마시고 [email protected] 으로 메일 주세요. 대략의 상황(주문 번호나 리포트 링크가 있으면 좋습니다)을 알려 주시면 최대한 빨리 확인하고 환불해 드리겠습니다.

믿고, 그리고 완성될 때까지 기다려 주신 여러분, 감사합니다. 다음에 또 뵙겠습니다.