GPT 6.1 Terra, 컴퓨터 사용(Computer Use) 특화 모델로 시험해 보니

진행자는 GPT 6.1 Terra가 컴퓨터 사용(Computer Use)을 강조하고 있다고 소개했다. 화면을 이해하고 직접 액션을 수행하는 능력이 이번 모델의 핵심 강조점이라는 설명이다. 진행자는 이를 근거로 Terra를 컴퓨터 사용에 특화된 모델로 가져갈 계획이라고 봤다.

진행자는 5.6 Terra 이후 아스트라, 솔, 루나가 나오면서 Terra의 포지션이 애매해졌다고 판단했다. 그러면서 오픈AI도 같은 생각이었을 것이라고 추정했다. 이번 발표로 컴퓨터 사용 쪽에 무게를 둔 것 같다는 해석이다.

진행자는 에이션 라스트 ex라는 평가 항목을 보여줬다. 이 평가는 모델이 생성 능력을 측정하는 것으로 소개됐고, 적은 토큰 대비 성능을 보는 지표로 설명됐다. 6.1 Terra는 5.6 Terra보다 크게 향상된 점수를 보였고, 6.1 솔과 아스트라보다도 높았다.

맥스 모드에서는 세 모델의 성능이 비슷했다. 다만 진행자는 클로드 오퍼스 5가 성능은 좋지만 토큰 비용이 많이 든다고 지적했다. 반면 Terra는 비용이 상대적으로 낮다는 점이 확인된다고 했다. 루나는 컴퓨터 사용 점수가 낮아 대안이 되기 어렵다고 봤다.

비전 테스트에서도 6.1 Terra가 좋은 결과를 냈다. 진행자는 Terra가 가성비 측면에서 최적화되어 있다고 평가했다. 앞으로 Terra는 컴퓨터 사용에 최적화된 방향으로 발전할 것이라는 전망도 덧붙였다.

진행자는 가능하면 루나 로우로 컴퓨터 사용 작업을 돌리려고 노력해 왔다고 말했다. 컴퓨터 사용은 토큰을 많이 쓰고 작업 시간도 길어, 빠르게 끝나지 않으면 사람이 직접 클릭하는 편이 낫다고 느꼈다는 설명이다. 그래서 쓸 만한 결과가 나오지 않으면 실제로는 사용하지 않았다고 한다.

진행자는 Terra가 컴퓨터 사용에 특화된 모델로 나온다면 능력이 좋고 빠르며 정확한 선택지가 될 수 있다고 기대했다. 터미널 벤치마크 같은 다른 항목은 기대하는 값과 거리가 있어 중요하지 않다고 봤고, 이번 테스트는 주로 컴퓨터 사용 기반으로 진행했다고 밝혔다.

진행자는 오픈AI가 벤치마크 수치는 공개했지만, 사용 사례나 고객 후기, 어떤 목적으로 이 방향에 나아가는지에 대한 설명은 거의 없었다고 지적했다. 이런 발표는 흔치 않다는 점을 짚었다.

이 때문에 진행자는 Terra를 컴퓨터 사용 원툴 모델로 가져가려는 것이 맞는 것 같다고 판단했다. 이 판단은 발표 자료에서 확인된 설명이 아니라 진행자의 해석이다.

진행자는 같은 프롬프트로 한강 오픈월드 게임을 여러 모델에 만들게 했다. 모션 그래픽은 루나와 솔의 중간쯤 수준으로 나왔고, 여러 모델이 대체로 잘 구현했다고 평가했다. 복잡하게 일부러 만들려는 시도는 보이지 않았다는 설명이다.

차 타기 등 기본 기능은 모두 구현됐지만 생성 속도는 다소 느렸다. 진행자는 같은 프롬프트로 여러 번 게임을 만들면서 클로드 계열 결과물과 코덱스 계열 결과물의 그림체와 플레이 경험이 확연히 구분된다고 느꼈다.

진행자는 게임의 그림체와 플레이 경험이 요청과 같은 방향으로 구현됐다고 봤다. 다만 완성도는 높다고 보기 어렵다고 했다. 루나보다는 조금 나았지만 완성도를 높이는 방향으로 최적화된 느낌은 아니라는 평가다.

웹사이트 스크롤은 솔보다 부드러움이 떨어진다고 말했다. 한편 루나 2.6.1에서 있었던 마우스를 올렸을 때 파티클이 퍼지는 버그는 이번 테스트에서 해결된 것으로 보인다고 밝혔다.

진행자는 한국어 작업에는 클로드에서 소넷을 주로 쓴다고 밝혔다. 코덱스에서는 솔을 쓰고 있으며, 솔 로우 설정도 괜찮은 결과를 준다고 말했다. 루나 미디엄 정도도 나쁘지 않다고 평가했다.

진행자는 한국어 문단 샘플을 보여주며 결과 변화가 크지 않다고 짚었다. 두 가지 모델을 나눠 쓴다는 설명이 이어졌다.

진행자는 드림카인 포르쉐 911 터보 카브리올레를 테스트 대상으로 골랐다. 사이트에서 옵션을 고르면 약 4억 2천만 원대가 나오는 차량이다. 참고 자료 없이 사이트의 옵션만 주고 블렌더로 그대로 그려 달라고 요청했다.

진행자는 휠 스포크 개수가 맞지 않을 것으로 예상했고, 실제로 스포크는 일부만 맞춰지는 중이었다. 사이드 포르쉐 로고, 사이드 스커트의 문구, 라이트, 배기구, 손잡이 등은 구현됐고 포르쉐 마크도 잘 들어갔다. 다만 배기구는 원래 나와야 할 수량까지 작업이 이뤄지지 않았다고 했다.

진행자는 4시간 넘게 돌렸지만 완성도는 높지 않은 상태라고 밝혔다. 완성될 때까지 계속 돌려 볼 예정이며, 결과가 괜찮으면 다시 보여 주겠다고 말했다. 결과가 좋지 않으면 다시 찍지 않을 수도 있다고 덧붙였다.

진행자는 Terra가 특별히 신경 써야 할 모델은 아니라고 결론지었다. 출시된 지 약 10시간밖에 안 돼, 컴퓨터 사용 테스트를 해 보려는 사람에게는 재미있을 수 있다고 말했다. 그렇지 않다면 특정 목적으로 굳이 Terra를 쓸 필요는 없다는 판단이다.

진행자는 평소 쓰던 솔과 아스트랄 위주로 사용하면 된다고 권했다. 비주얼 작업의 완성도가 높아지면 다시 영상으로 다루겠다고 밝히며 마무리했다.