OpenAI에 대한 퍼드가 나날이 나오고 있네요. 이번엔 동일 모델, 동일 추론에 대한 성능이 API 와 Codex가 다르다는 퍼드입니다.
OpenAI의 자체 Codex 하네스를 사용하더라도, API를 직접 돈주고 쓰는 사람에 비해 훨씬 열등한 버전으로 사용하게 된다는 건데요.
실제로 얼마나 깊게 생각해도 되는지에 대한 OpenAI 내부 추론값으로 알려진 juice값이 Astra Max기준 Codex에선 128, API에선 832로 측정되었다고 하네요.
https://x.com/TokenGremlin/status/2104559277700510034