GPT-6 Astra가 출시 이후 저하된 성능은 사용자와 테스터들이 보고한 인식으로, 이 모델은 출시 성능에 비해 지능이 감소한 것으로 보이며, 테스트에서의 직접 비교 결과 더 나쁜 출력을 보여주고 있습니다. 일부 테스터들은 더 빠른 응답을 관찰했지만, 응답의 질은 낮아지고 ‘주스 가치’가 줄어들었다고 의심하고 있습니다. 출시 일주일 후, GPT-6 Astra는 게임 엔진 내에서 맨해튼 거리를 하나씩 재건설하고 있었습니다.
여러 사용자와 테스터는 GPT-6 Astra가 이제 출시 시점보다 성능이 저하되었다고 보고하며, 직접 비교에서 모델이 상당히 더 멍청해 보인다고 설명했습니다. 테스터들은 현재 버전에서 어떤 응답이 출시 시점보다 더 빠르게 생산되지만, 그 출력에 대한 질적 평가는 더 나쁘다고 보고했습니다. 여러 테스터는 모델의 ‘주스 가치’—모델이 응답하기 전에 치르는 계산 노력을 간단히 표현한 용어—가 줄어들었을 것이라는 의심을 나타냈습니다.
통제된 프롬프트 비교에서 Salio와 Md Ismail Sojal은 출시 날의 Astra 인스턴스와 이후 버전에서 동일한 프롬프트를 실행하고 후자의 버전에서 더 나쁜 결과를 기록했습니다. 이 사용자 보고와 테스터의 관찰은 내부 변화를 명시하지 않고 비교 출력 품질과 응답 타이밍에 초점을 맞췄습니다.
발표된 보고서와 테스트 비교는 사용자와 테스터의 이러한 인식과 측정을 요약합니다. 그들은 성능 변화에 대한 상세한 메커니즘이나 결정적인 기여를 포함하지 않습니다. 여기서 설명된 진술은 사용자 보고와 테스터 비교에서 비롯되었습니다.
“주스 가치”라는 용어는 모델이 답변하기 전에 생각하는 데 소모하는 컴퓨팅 노력을 나타내는 줄임말로 사용됩니다. 이는 공인된 용어가 아니며 공식적으로 정의되지 않았습니다. 테스터들과 관찰자들은 모델의 성능을 비교할 때 GPT-6 Astra의 주스 가치를 언급하였습니다. 이러한 보고서에는 OpenAI가 출시 시연 이후 모델의 주스 가치를 줄였다는 구체적인 의심이 포함되어 있으며, 이는 일부에 의해 조용한 감소로 표현됩니다.
GPT-6 Astra의 코드를 검토한 Pranjal Paliwal은 모델의 현재 상태가 “우리는 AGI가 없습니다. 우리는 회귀하고 있습니다.”라는 것을 나타낸다고 언급했습니다. AGI는 인공 일반 지능을 의미하며, 이는 인간이 수행할 수 있는 모든 지적 작업을 수행하는 것을 목표로 합니다. GPT-6 Astra의 출시에서 OpenAI의 사장이 AGI라는 용어를 사용해 모델에 대한 야망을 강조했습니다. 이러한 발언들은 Astra의 현재 능력과 출시 시의 초기 약속을 비교한 전문가 의견을 담고 있습니다.
이 기사는 사용자와 테스터들이 GPT-6 Astra의 성능이 출시 이후 감소했다고 인식하고 있으며, 모델이 직접적인 비교에서 상당히 덜 똑똑하다고 설명하는 보고서를 다루었습니다.
관찰자들은 이후 버전에서 응답 시간이 빨라진 것으로 보고했지만, 출력 품질은 더 나빠졌다고 평가하며 모델의 “주스 가치”—답변하기 전에 모델이 생각하는 데 소모하는 컴퓨팅 노력의 줄임말—가 줄어들었다는 의혹을 제기했습니다. Salio와 Md Ismail Sojal은 출시 당일과 이후 버전에서 동일한 프롬프트를 테스트하고, 이후 버전에서 더 나쁜 결과를 기록했습니다.
보도에는 Pranjal Paliwal의 코드 리뷰 결론도 포함되어 있으며, 이는 릴리스가 AGI보다 회귀로 간주된다고 언급했습니다. 또한 OpenAI의 사장이 Astra 출시 시 AGI라는 용어를 사용했다는 점도 지적되었습니다.
