내 전체적인 느낌은 Fable이 매우 사려 깊고 말솜씨가 훌륭한 '현명한 부엉이' 같다는 거고, GPT-5.6-Sol은 문제를 목구멍을 물고 놓지 않으며 끝날 때까지 물고 늘어지는 로트와일러 같아.
다른 말로 하면, Fable은 근본적으로 더 똑똑한 모델이야 - 낮은 추론 수준에서도 매우 통찰력 있고, 명확하고 설득력 있게 쓴다. 반면 GPT-5.6-Sol은 극도로 성실해서, 8가지 할 일 목록을 주면 확실히 다 끝낼 거야.
Fable은 나한테 더 거만하게 느껴져. 새로운 벤치마크를 만들어달라고 하려니 5.6은 6시간에서 2일 사이에 걸렸어 (몇 번 시도했어) 그리고 아주 철저히 테스트된, 작동하는 벤치마크를 내놨지. Fable은 40분 만에 (두 번) 돌아왔고, 벤치마크는 똑똑해 보였지만 결국 '느낌' 기반의 엉터리였어. 게다가 판단을 내리는 게 Fable의 느낌이었기 때문에, 그게 괜찮다고 결정했지 (참고로 Fable에게 100% 점수를 계속 줬어).
카테고리별 생각들:
UI & 앱 빌딩: Fable이 여전히 처음부터 더 나은 UI를 만들겠지, 앱의 흐름도 아마 조금 더 좋을 거야. 하지만 Fable은 종종 꽤 중요한 걸 놓치는데, GPT-5.6-Sol은 그렇지 않아. GPT의 프론트엔드 스킬은 이전 GPT 모델들에 비해 큰 도약이지만, 전체적으로는 여전히 최고는 아니야.
쓰기: Fable이 단연코 더 나아, Sol은 내가 말하고 싶은 걸 맞추거나 간단히 설명해주는 데 꽤 어렵게 느껴져. 그래도 'Pro' 모델은 더 명확하게 쓴다고 생각해.
견고함 & 신뢰성: 여기서 GPT-5.6-Sol이 나한테 단연코 이겨. Fable은 고품질의 걸 만들지만, 절대 안심할 수 없어, 항상 뭔가를 놓치니까. 5.6에서는 이런 일이 거의 일어나지 않아.
다른 것들에서 GPT-5.6-Sol을 좋아했지만, Fable과 직접 비교할 수 없는 부분들.
- 비디오 편집이 이제 실제로 작동해, 완벽하진 않지만 적절한 스킬/지침으로 1시간 분량 영상을 주면 5분 하이라이트 클립을 문제없이 만들어줘
- 컴퓨터 사용 - 정말 꽤 좋아져서, 아주 사용 가능해
- 서브 에이전트 - 서브 에이전트를 관리하고 다른 스레드와 소통하는 데 아주 유창해, 새로운 워크플로우에 도움이 돼
- 기존 코드 패턴 준수 - 이게 좋아, 요청하지 않아도 앱과 맞는 방식으로 구현해 - 엉터리 생성의 주요 문제 해결
- 연구 - 꽤 많이 좋아지고 있다고 생각해, 여전히 나쁜 패턴(예: 너무 전술적임)이 있지만, 좋은 연구자가 되도록 더 조종하기 쉬워진 느낌
- 다일 실행 - /goal 기능이 5.6-Sol에서 정말 미쳤어, 원하면 며칠 동안 돌릴 수 있고 실제로 작동해. 다른 스레드나 /side로 확인하는 게 유용하지만, 그걸로 엄청난 결과를 얻었어
- 토큰 효율성 - 5.5보다 훨씬 더 토큰 효율적이고 빠르지, 실제로 이제 Fable보다도 훨씬 빨라
단점으로는, Fable이 자연스럽게 더 똑똑하다는 게 느껴져. 8턴 만에 꽤 간단한 변화를 시키려다 5.6으로 baffling한 순간이 있었어 - 멍청한 흐름에 갇혀서 빠져나오기 힘들었거든. 그러니 AGI가 아니야, 과도한 hype에 너무 휩쓸리지 마.
정말 놀라운 예시들이 있는데 솔직히 깜짝 놀랐어, 공유할게. 그런데 부수적인 일화로, Codex에게 얼마나 자주 무례하게 구는지 세는 '욕계'가 있어. GPT-5.5 시대에는 %가 4-5% 정도였는데, GPT-5.6-Sol 테스트할 때는 1-2%로 떨어졌고, 5.5로 돌아가니 7%로 치솟았어 - 5.5로 돌아가서 얼마나 나빴던지 체험하니 충격적이었어.
그래서 GPT-5.6-Sol이 Fable보다 나아? 순수 지능으로는 - 아니. 하지만 맙소사, 일단 sh*t를 끝내고 싶을 때 그걸 그리워했어. 어떤 작업이든 주면 그냥 끝낼 거라 기대할 수 있는 미친 작업마차야. 강의나 '당신이 절대적으로 옳아요' 같은 거 없고, 뭐든 밑천 삼지 않아. 더러운 일에 2일 걸리더라도 할 거야.
최근 오랜만에 벤치마크는 비슷하지만 느낌이 아주 다른 프론티어 지능 유형들이 나왔다는 기분이야. 할 수 있다면 둘 다 써보고, 반복적으로 Fable이나 GPT-5.6-Sol을 어디에 쓸지 찾아보는 게 나을 거야. 아마도 - Fable과 건축적 토론, 5.6으로 구현, 문서 & 커뮤니케이션은 Fable과 같이.
트위터보면 거의 비슷한 반응인데 5.6 sol이 작업을 끝까지 오류없이 미는경향은 있는데 틀짜기는 좀 부족해서
Fable 기초 스캐폴딩 짜고 놓치거나 대충 그럴듯하게 구현한 부분만 5.6 sol 써서 디버깅하는게 베스트일거같네요