여러 언어 모델에 같은 펠리컨 그림 요청을 했을 때 결과가 서로 닮는다는 관찰을 바탕으로, 한 개발자가 모델의 독창성과 디자인 평가 방식을 비판했다. 함께 확인한 Kombai 벤치마크는 지시 이행과 디자인 품질을 별도로 측정한다. 지시를 잘 따르는 모델이라도 인간 기준의 시각적 완성도까지 보장하는 것은 아니라는 구분이 핵심이다. 특정 프롬프트의 유사한 출력만으로 모든 모델의 학습 데이터나 창의성의 원인을 입증할 수는 없다.
테크
시각 작업은 요구사항 충족과 결과물의 품질을 나눠 검토하는 편이 낫다.
여러 언어 모델에 같은 펠리컨 그림 요청을 했을 때 결과가 서로 닮는다는 관찰을 바탕으로, 한 개발자가 모델의 독창성과 디자인 평가 방식을 비판했다. 함께 확인한 Kombai 벤치마크는 지시 이행과 디자인 품질을 별도로 측정한다. 지시를 잘 따르는 모델이라도 인간 기준의 시각적 완성도까지 보장하는 것은 아니라는 구분이 핵심이다. 특정 프롬프트의 유사한 출력만으로 모든 모델의 학습 데이터나 창의성의 원인을 입증할 수는 없다.