AI 테스트 RTX 5060 Ti 16GB

[RTX 5060 Ti 16GB] AI에게 three.js 3D 애니메이션을 시키면 될까? Claude는 15번 모두, 로컬 Gemma 4 12B는 10번 됐다

23회 1일 전
[RTX 5060 Ti 16GB] AI에게 three.js 3D 애니메이션을 시키면 될까? Claude는 15번 모두, 로컬 Gemma 4 12B는 10번 됐다

요즘 AI에게 "three.js로 은하가 도는 장면을 만들어 줘"처럼 한 줄로 시켜 3D 애니메이션을 만드는 일이 많습니다. three.js는 웹 브라우저에서 3D 그림을 그리는 자바스크립트 라이브러리입니다. 그래서 클라우드 AI인 Claude Opus 5.5와, RTX 5060 Ti 16GB에서 돌린 로컬 AI Gemma 4 12B QAT에게 같은 요청 5가지를 3번씩 똑같이 시켜 봤습니다. 결론부터 적으면 Claude는 15번 모두 요청한 모습대로 동작했고, Gemma는 생각(Thinking)을 끄면 15번 중 10번, 켜면 8번이었습니다.

  • 둘 다 잘한 것: 도는 정육면체, 마우스로 돌려 보는 태양계는 셋 다 3번 모두 됐습니다.
  • Gemma가 어려워한 것: 나선 은하와 출렁이는 바다는 돌아가기는 했지만 모양이 요청과 다른 경우가 많았습니다. 바다는 6번 중 한 번도 요청대로 나오지 않았습니다.
  • 실패 원인: 괄호 하나가 덜 닫힌 코드, 선언하지 않은 변수, 공 위로 지나가서 절대 부딪히지 않는 상자처럼 작은 실수였습니다.
  • 속도: Gemma는 장면 하나를 평균 10.9초(생각 끔)에 만들었습니다. 생각을 켜면 시간이 약 2배가 됐지만 결과는 나아지지 않았습니다.
  • 화면을 보여 주고 고치게 하면: 은하·바다를 3번씩 고치게 하자 Claude는 완성도 점수(1~5)가 바다 4.0에서 5.0으로 올라 사진 같은 바다가 됐습니다. Gemma는 1.0에서 1.7로 조금 올랐고, 바다는 3번 고쳐도 3개 중 1개만 바다처럼 보였습니다.

이 글의 결과를 20초로 요약한 영상입니다(소리 없음). 영상의 3D 상자와 막대도 three.js로 그렸습니다.

Gemma 쪽 시간과 메모리는 RTX 5060 Ti 16GB PC에서 2026년 11월 15일에 직접 잰 값입니다. 결과 45개는 모두 같은 크롬 브라우저로 열어 같은 규칙으로 판정했고, 고르지 않고 모두 실었습니다. three.js를 처음 듣는 분도 따라올 수 있게 기초부터 적었습니다.

요약 여섯 칸. Claude Opus 5.5(클라우드) 15번 중 15번 요청대로, 오류 0. Gemma 4 12B QAT 생각 끔 15번 중 10번, 일부만 4번, 실패 1번(게임 오버가 나올 수 없는 게임), 오류 0. 생각 켬 15번 중 8번, 일부만 3번, 실패 4번, 그중 2번은 코드 오류로 빈 화면. 셋 다 3번 모두 된 과제 2가지(도는 정육면체, 태양계와 마우스 끌기). Gemma 한 번 만드는 시간 생각 끔 평균 10.9초, 생각 켬 21.5초, 초당 약 111토큰. Gemma가 쓴 VRAM 14.3GB, Unsloth Studio 기본값(Auto, 컨텍스트 262,144)

같은 요청 15개씩, 같은 브라우저와 같은 규칙으로 판정한 결과입니다.

three.js는 무엇인가요?

웹 브라우저에는 그래픽카드로 3D 그림을 그리는 WebGL이라는 기능이 원래 들어 있습니다. 그런데 WebGL을 직접 쓰면 상자 하나 그리는 데도 코드가 수백 줄이 됩니다. three.js는 이 일을 쉽게 해 주는 자바스크립트 라이브러리입니다. 2010년쯤부터 쓰였고, 회사 소개 사이트에서 마우스를 따라 움직이는 3D 배경 같은 것을 주로 이걸로 만듭니다.

three.js 장면은 여섯 가지로 이뤄집니다. 연극에 비유하면 무대(장면), 관객의 눈(카메라), 조명, 배우(물체)가 있고, 이것을 화면에 그리는 사람(렌더러)이 1초에 60번 안팎으로 다시 그립니다(반복).

three.js 장면을 이루는 여섯 가지. 장면(Scene): 물건을 올려 두는 무대, 배경색과 안개도 여기서 정함. 카메라(Camera): 무대를 보는 눈, 위치와 방향과 넓이를 정함. 조명(Light): 빛이 없으면 물체가 검게 보이고 빛 방향에 따라 면마다 밝기가 달라짐. 물체(Mesh = 모양 + 재질): 상자·공·판 같은 모양과 색·반짝임 같은 겉면을 합친 것. 렌더러(Renderer): 카메라에 보이는 장면을 그래픽카드(WebGL)로 화면에 그림. 반복(animate): 1초에 60번 안팎으로 물체를 조금씩 옮기고 다시 그려 움직여 보이게 함

이 글에서 두 AI가 만든 코드에도 모두 이 여섯 가지가 들어 있습니다.

정말 30줄이면 3D 상자가 도나요?

아래는 이 글에서 설명하려고 직접 줄여 쓴 예시입니다(시험 결과가 아닙니다). 번호 ①~⑥이 위 그림의 여섯 가지입니다. 이 코드를 메모장에 붙여 넣고 cube.html로 저장한 뒤 두 번 누르면, 브라우저에서 파란 상자가 돕니다. 시험에 쓴 크롬으로 열어 오류 없이 도는 것을 확인했습니다.

<!DOCTYPE html>
<html lang="ko">
<head>
<meta charset="UTF-8">
<title>도는 정육면체</title>
<style>body { margin: 0; overflow: hidden; background: #000; }</style>
</head>
<body>
<script type="importmap">
{ "imports": { "three": "https://unpkg.com/three@0.160.0/build/three.module.js" } }
</script>
<script type="module">
import * as THREE from "three";                       // three.js 불러오기(인터넷 필요)

const scene = new THREE.Scene();                      // ① 장면: 무대
const camera = new THREE.PerspectiveCamera(60, innerWidth / innerHeight, 0.1, 100);
camera.position.set(0, 0, 4);                         // ② 카메라: 앞에서 4만큼 떨어져 봄

scene.add(new THREE.AmbientLight(0xffffff, 0.3));     // ③ 조명: 은은한 빛 + 한쪽에서 오는 빛
const sun = new THREE.DirectionalLight(0xffffff, 2);
sun.position.set(3, 4, 5);
scene.add(sun);

const cube = new THREE.Mesh(                          // ④ 물체 = 모양 + 재질
  new THREE.BoxGeometry(1.5, 1.5, 1.5),
  new THREE.MeshStandardMaterial({ color: 0x3b82f6 })
);
scene.add(cube);

const renderer = new THREE.WebGLRenderer({ antialias: true });   // ⑤ 렌더러: 화면에 그림
renderer.setSize(innerWidth, innerHeight);
document.body.appendChild(renderer.domElement);

function animate() {                                  // ⑥ 반복: 1초에 60번 안팎
  requestAnimationFrame(animate);
  cube.rotation.x += 0.005;                           // 조금씩 돌리고
  cube.rotation.y += 0.01;
  renderer.render(scene, camera);                     // 다시 그림
}
animate();
</script>
</body>
</html>

위 예시 코드를 크롬으로 연 화면. 검은 바탕 가운데 파란 정육면체가 비스듬히 기울어 있고, 빛이 오는 위쪽 면은 밝고 옆면은 어두움

예시 코드를 연 화면입니다. 빛이 오는 쪽 면이 밝습니다.

움직이는 원리는 만화 영화와 같습니다. 반복(⑥)이 돌 때마다 상자를 아주 조금 돌리고 다시 그립니다. 그림이 1초에 수십 장 이어지니 눈에는 상자가 부드럽게 도는 것처럼 보입니다.

Claude가 만든 정육면체를 크롬에서 연 화면 4장. 0.00초, 0.22초, 0.44초, 0.66초에 상자가 조금씩 더 돌아가 있음. 약 32장/초로 찍은 것 가운데 7장 간격

조금씩 돌려 다시 그린 그림이 이어져 움직여 보입니다.

AI가 만든 HTML 파일은 어떻게 여나요?

이번 요청에는 모두 "HTML 파일 하나에 모든 코드를 넣어 달라"는 문장을 붙였습니다. 그래서 AI의 답을 파일 하나로 저장하면 바로 열 수 있습니다.

  1. AI가 준 코드(<!DOCTYPE html>부터 </html>까지)를 복사합니다.
  2. 메모장에 붙여 넣고, 저장할 때 파일 이름을 장면.html처럼 .html로 끝나게 적습니다. 인코딩은 UTF-8로 둡니다(한글이 깨지지 않게).
  3. 저장한 파일을 두 번 누르면 기본 브라우저(크롬, 엣지 등)로 열립니다.

인터넷이 연결돼 있어야 합니다. 이 시험에서 두 AI가 만든 45개 파일은 모두 three.js를 인터넷 주소(unpkg, jsdelivr, cdnjs)에서 불러왔습니다. 인터넷이 끊겨 있으면 three.js를 못 불러와 빈 화면만 나옵니다. 화면이 비어 있으면 키보드의 F12를 눌러 '콘솔' 탭에 빨간 오류 글자가 있는지 보면 원인을 찾기 쉽습니다.

어떻게 시험했나요?

사용자와 정한 원칙은 하나였습니다. 실력 차이는 그대로 보여 주되, 환경 때문에 한쪽이 유리하거나 불리하지 않게 하는 것입니다.

시험 방법 다섯 단계. 1 같은 요청: 글자 하나 다르지 않은 한국어 요청 5가지, 끝에 HTML 파일 하나에 코드만. 2 두 AI가 답함: Claude는 앞의 대화를 모르는 새 세션, Gemma는 이 PC의 Unsloth Studio 기본값, 고쳐 달라고 하지 않음. 3 HTML 꺼내기: 답에서 코드 부분만 같은 규칙으로 꺼내 파일로 저장. 4 같은 크롬으로 열기: 1280×720, 그래픽카드 사용, 파일을 두 번 눌러 연 것과 같은 방식. 5 판정: 오류, 빈 화면, 움직임, 마우스 끌기, 방향키, 게임 오버와 다시 시작, 모양은 눈으로 3단계

과제마다 3번씩, 결과는 고르지 않고 모두 실었습니다.

항목Claude Opus 5.5Gemma 4 12B QAT
어디서 도나Anthropic 서버(클라우드)이 PC의 RTX 5060 Ti 16GB
어떻게 시켰나Claude Code에서 앞의 대화를 모르는 새 세션을 띄워 요청만 전달. 답을 그대로 파일로 저장하게 하고, 검색·파일 읽기·브라우저는 쓰지 못하게 함Unsloth Studio API로 요청만 보냄(시스템 프롬프트 없음)
생성 설정정할 수 없음(기본 상태)Unsloth Studio 기본값(Auto). 온도 같은 값을 주지 않음
생각(Thinking)정할 수 없음(기본 상태)끔·켬 두 가지를 따로 15번씩
파일-unsloth/gemma-4-12B-it-qat-GGUF UD-Q4_K_XL (6.26GB)
기회과제마다 3번, 한 번에 답. 결과를 보여 주고 고치게 하지 않음
판정같은 PC, 같은 크롬(1280×720, 그래픽카드 사용), 같은 자동 점검과 같은 눈 판정 기준

맞출 수 없는 것도 있었습니다. Claude는 회사 서버에서 돌아서 속도를 견줄 수 없습니다. 그래서 시간과 메모리는 Gemma 쪽만 적었습니다. Claude의 생성 설정과 생각 사용 여부도 바꿀 수 없어서 기본 상태 그대로 뒀습니다. Claude Code 안에서 돌아 Claude 쪽에는 Claude Code의 기본 안내문이 함께 들어갔다는 점도 다릅니다.

보낸 요청 5가지

다섯 가지 모두 끝에 같은 문장 "HTML 파일 하나에 모든 코드를 넣어, 브라우저로 열면 바로 동작하게 해 주세요. 코드만 답해 주세요."를 붙였습니다.

#난이도요청무엇을 봤나
1쉬움three.js로 화면 가운데에서 천천히 도는 정육면체를 만들어 주세요. 조명을 넣어 면마다 밝기가 달라 보이게 해 주세요.상자가 돌고 면마다 밝기가 다른가
2보통three.js로 입자 5,000개가 나선 모양 은하를 이루며 천천히 도는 장면을 만들어 주세요.나선 팔이 보이고 도는가
3보통three.js로 파도가 출렁이는 바다 표면을 비스듬히 내려다보는 장면을 만들어 주세요.바다처럼 보이는 수면이 출렁이는가
4어려움three.js로 태양과 행성 4개를 만들고, 행성이 서로 다른 속도로 태양 둘레를 돌게 해 주세요. 마우스로 끌어서 보는 각도를 돌릴 수 있어야 합니다.행성 4개, 서로 다른 속도, 마우스로 끌면 각도가 바뀌는가
5어려움three.js로 방향키로 공을 움직여 위에서 떨어지는 상자를 피하는 게임을 만들어 주세요. 점수를 보여 주고, 부딪히면 게임 오버와 다시 시작 버튼이 나와야 합니다.방향키로 공이 움직이는가, 점수, 게임 오버, 다시 시작

판정은 어떻게 했나요?

먼저 크롬을 자동으로 조종하는 도구(Puppeteer)로 파일을 열어 오류가 있는지, 화면이 비었는지, 그림이 움직이는지를 봤습니다. 태양계는 3.5초 뒤 마우스로 화면을 아래로 끌어 각도가 바뀌는지 봤습니다. 게임은 방향키를 1초씩 눌러 공이 움직이는지, 최대 40초 기다려 게임 오버가 나오는지, 다시 시작 버튼을 누르면 게임이 다시 도는지 봤습니다.

그다음 모양은 화면을 보고 세 단계로 나눴습니다. 요청대로(요청한 것이 다 보임), 일부(돌아가지만 요청과 다른 데가 있음), 아님(오류로 안 보이거나 요청한 것이 아님)입니다.

처음 만든 자동 점검은 어두운 우주 화면에서 틀렸습니다. 천천히 도는 행성이 '안 움직임'으로 잡혔고, 옆으로 끄는 시험은 궤도가 동그라미라 돌려도 화면이 거의 같아 '안 바뀜'으로 잡혔습니다. 그래서 끌기를 아래쪽으로 바꾸고, 끌기 전후 화면을 눈으로도 비교했습니다. 두 AI 모두에 같은 방법을 다시 적용했습니다.

결과를 한눈에 보면

결과 표. 동그라미 하나가 한 번의 결과, 청록은 요청대로, 노랑은 일부, 빨강은 실패. 1 도는 정육면체(쉬움): Claude 3/3, Gemma 생각 끔 3/3, 생각 켬 3/3. 2 입자 은하(보통): Claude 3/3, Gemma 끔 2/3(1번 일부), 켬 0/3(일부 2, 실패 1). 3 출렁이는 바다(보통): Claude 3/3, Gemma 끔 0/3(일부 3), 켬 0/3(실패 2, 일부 1). 4 태양계와 마우스 끌기(어려움): 셋 다 3/3. 5 공 피하기 게임(어려움): Claude 3/3, Gemma 끔 2/3(실패 1), 켬 2/3(실패 1). 합계 Claude 15/15, Gemma 끔 10/15, 켬 8/15

두 AI에 같은 판정 기준을 썼습니다.

이 표가 뜻하는 것은 이렇습니다. 쉬운 과제와 '부품이 정해진' 과제(태양과 행성, 마우스로 돌리기)는 Gemma도 잘했습니다. 반면 은하의 나선, 바다의 물결처럼 모양을 수학으로 만들어야 하는 과제에서 차이가 컸습니다. 어려울 줄 알았던 게임은 오히려 Gemma가 6번 중 4번 해냈습니다.

과제별로 보면

과제마다 비교 영상 하나와 9개 결과 화면을 모두 실었습니다. 영상은 셋 다 '1번째 결과'로 맞췄습니다(고른 것이 아닙니다). 화면 모음은 3번 모두입니다.

1. 도는 정육면체: 셋 다 9번 모두 됨

1번째 결과 셋을 같은 크롬에서 연 6초 영상입니다(소리 없음).

도는 정육면체 결과 9개. Claude 3개는 파란 상자, Gemma 생각 끔은 청록·초록·파란 상자, 생각 켬은 하늘색·초록·파란 상자. 모두 면마다 밝기가 다르고 돎. 9개 모두 요청대로

열고 3초 뒤 화면입니다.

가장 쉬운 과제라 차이가 없었습니다. Gemma는 생각 끔으로 평균 766토큰, 7.1초 만에 코드를 썼습니다. Claude의 상자가 화면에서 조금 더 크고, Gemma는 상자 색을 매번 다르게 골랐다는 정도가 달랐습니다.

2. 입자 은하: Claude 3번, Gemma 끔 2번, 켬 0번

1번째 결과 셋을 같은 크롬에서 연 6초 영상입니다(소리 없음).

입자 은하 결과 9개. Claude 3개 모두 나선 팔 2개가 선명함(요청대로). Gemma 생각 끔: 1번째 나선 팔 1개(요청대로), 2번째 둥근 원반으로 나선이 안 보임(일부), 3번째 나선 팔 1개(요청대로). Gemma 생각 켬: 1번째 둥근 원반(일부), 2번째 문법 오류로 빈 화면(아님), 3번째 흩어진 점(일부)

열고 3초 뒤 화면입니다.

Claude는 세 번 모두 가운데가 밝고 팔 두 개가 휘어 도는, 사진에서 보던 은하 모양을 만들었습니다. Gemma는 나선 팔을 하나만 그리거나, 점을 둥근 원반에 고르게 뿌려 나선이 보이지 않는 경우가 많았습니다. 점 5,000개가 도는 것 자체는 Gemma도 모두 했습니다(오류가 난 1번 빼고).

3. 출렁이는 바다: Claude 3번, Gemma 0번

1번째 결과 셋을 같은 크롬에서 연 6초 영상입니다(소리 없음).

출렁이는 바다 결과 9개. Claude 3개 모두 물결과 하늘과 수평선이 보이는 바다(요청대로). Gemma 생각 끔: 1번째 옆에서 본 언덕처럼 보임, 2번째 파란 물결 판의 가장자리가 보임, 3번째 물결이 약하고 판 가장자리가 보임(셋 다 일부). Gemma 생각 켬: 1번째 셰이더 오류로 빈 화면(아님), 2번째 물결 판 가장자리와 초록 배경(일부), 3번째 흰 줄무늬만 보여 바다로 보이지 않음(아님)

열고 3초 뒤 화면입니다.

차이가 가장 컸던 과제입니다. Claude는 세 번 모두 수평선까지 물결이 이어지고, 물결 꼭대기가 하얗게 빛나는 바다를 만들었습니다. 셰이더(그래픽카드에서 도는 작은 프로그램)로 물결 높이와 색을 직접 계산한 코드였습니다.

Gemma도 6번 중 5번은 판이 출렁였습니다. 하지만 판이 작아서 가장자리가 화면에 그대로 보이거나, 카메라가 낮아 언덕처럼 보였습니다. 생각을 켠 3번째는 물결 높이를 색으로 바꾸는 계산이 틀려 화면 전체가 흰 줄무늬가 됐습니다.

4. 태양계 + 마우스 끌기: 셋 다 9번 모두 됨

1번째 결과 셋을 같은 크롬에서 연 6초 영상입니다(소리 없음). 3초쯤 마우스로 끌었습니다.

태양계 결과 9개를 마우스로 아래로 끈 뒤의 화면. 9개 모두 위에서 내려다보는 시점으로 바뀌어 동그란 궤도와 행성 4개가 보임. Gemma 생각 끔 1번째만 궤도선이 없고 행성이 어두움. 9개 모두 요청대로

마우스로 아래로 끈 뒤의 화면입니다.

세 쪽 모두 three.js에 딸린 OrbitControls(마우스로 카메라를 돌려 주는 부품)를 썼습니다. 이 부품을 쓰면 마우스 끌기는 코드 두세 줄로 끝납니다. 그래서 어려울 줄 알았던 과제가 쉬운 과제가 됐습니다. 차이는 꾸밈에 있었습니다. Claude는 3번 모두 태양 둘레에 빛이 번지는 효과를 넣어 태양이 빛나 보였고, Gemma의 태양은 노란 원이었습니다.

5. 공 피하기 게임: Claude 3번, Gemma 끔 2번, 켬 2번

1번째 결과 셋을 같은 크롬에서 연 6초 영상입니다(소리 없음). 4초부터 방향키를 눌렀습니다.

공 피하기 게임 결과 9개. Claude 3개는 격자 판과 색깔 상자, 점수 표시, 2번째는 공을 가만히 둬서 3초 만에 게임 오버 화면. Gemma 생각 끔 3개와 생각 켬 3개는 회색 판과 빨간 상자, 초록 또는 청록 공, Score 표시. Gemma 생각 끔 2번째와 생각 켬 1번째는 상자가 공에 닿을 수 없어 게임 오버가 나올 수 없음(아님), 나머지는 요청대로

열고 3초 뒤 화면입니다.

방향키는 9개 모두 동작했습니다. 게임 오버가 나온 7개는 다시 시작 버튼을 누르면 모두 새 판이 시작됐습니다. Claude의 게임 2개에는 최고 점수와, 상자가 떨어질 바닥 자리를 미리 보여 주는 빨간 동그라미가 더 들어 있었습니다.

Gemma의 게임 2개는 언뜻 잘 돌아가지만 게임 오버가 날 수 없었습니다. 40초 동안 공을 가만히 둬도 끝나지 않아서 코드를 읽어 봤습니다. 원인은 아래 '왜 틀렸나요?'에 적었습니다.

Gemma는 왜 틀렸나요?

Gemma 4 12B QAT 실패 원인 표. 생각 켬 은하 2번째: 빈 화면, 괄호 하나가 덜 닫힘. 생각 켬 바다 1번째: 빈 화면, 셰이더에서 선언하지 않은 변수 uTime을 씀. 생각 켬 바다 3번째: 바다로 안 보임, 물결 높이를 색으로 바꾸는 계산이 화면 전체를 흰 줄무늬로 만듦. 생각 끔 게임 2번째: 게임 오버 불가, 상자가 높이 15에서 출발해 공 자리에 왔을 때 높이가 아직 10이라 공 위로 지나감. 생각 켬 게임 1번째: 게임 오버 불가, 상자가 공보다 약 17칸 먼 곳에서 바닥까지 떨어져 사라짐. 은하와 바다 7번: 모양이 다름

코드를 직접 읽어 원인을 확인했습니다.

오류로 빈 화면이 된 2번은 사람이 고치면 1분이면 되는 실수였습니다. 은하 코드는 아래 줄에서 여는 괄호가 4개인데 닫는 괄호가 3개입니다. 브라우저는 이 한 줄 때문에 코드 전체를 읽지 못합니다.

const radius = (Math.random() * 20 + 2) * (1 + (angle / (Math.PI * 20));

게임 오버가 나오지 않는 게임은 오류 메시지조차 없어서 더 찾기 어렵습니다. 생각 끔 2번째 게임은 상자가 화면 안쪽 멀리, 높이 15에서 나와 한 장면(프레임)마다 앞으로 0.2칸, 아래로 0.05칸씩 옵니다. 공이 있는 자리에 오면 높이가 아직 10이라 공 머리 위로 지나갑니다. 화면으로는 상자가 공 쪽으로 날아오니 그럴듯해 보입니다.

AI가 만든 코드를 쓸 때는 화면만 보고 끝내지 말고, 요청한 기능을 하나씩 직접 눌러 봐야 하는 이유입니다. 이번 시험에서도 '돌아가는 것처럼 보이는데 실제로는 안 되는' 경우가 오류로 멈춘 경우보다 많았습니다.

Gemma는 생각을 켜면 나아지나요?

Gemma 4 12B QAT 과제별 만드는 시간 막대, 3번 평균. 정육면체 생각 끔 7.1초 766토큰, 생각 켬 14.5초 1,581토큰. 은하 끔 9.6초 1,038토큰, 켬 18.2초 1,932토큰. 바다 끔 10.3초 1,122토큰, 켬 21.9초 2,208토큰. 태양계 끔 10.9초 1,197토큰, 켬 25.6초 2,661토큰. 게임 끔 16.8초 1,888토큰, 켬 27.5초 2,891토큰. 생성 속도 끔 110.6, 켬 105.9 t/s. 생각 켬은 평균 3,667자의 생각 글을 먼저 씀

Unsloth Studio 기본값, 과제마다 3번 평균입니다.

나아지지 않았습니다. 생각을 켜면 Gemma는 코드를 쓰기 전에 평균 3,667자의 생각 글을 먼저 씁니다. 그래서 토큰과 시간이 약 2배가 됐습니다. 그런데 요청대로 나온 것은 10번에서 8번으로 줄었고, 오류로 빈 화면이 된 2번은 모두 생각을 켰을 때 나왔습니다. 코드 길이는 평균 4,175자와 4,234자로 거의 같았습니다.

세 번씩만 시험해서 '생각을 켜면 나빠진다'고 단정할 수는 없습니다. 다만 이번 요청처럼 짧은 코드를 만들 때는 생각을 켤 이유를 찾지 못했습니다. Gemma 4 12B를 RTX 5090에서 시험한 글에서는 생각을 끄면 간단한 산수를 5번 모두 틀렸는데, 코드 만들기에서는 생각을 켜도 나아지지 않았습니다.

화면을 보여 주고 고치게 하면 나아지나요?

여기까지는 한 번에 답하게 한 결과입니다. 실제로 AI에게 3D 장면을 시킬 때는 결과를 보고 "여기가 이상하니 고쳐 줘"를 몇 번 주고받습니다. 그래서 차이가 가장 컸던 은하와 바다로 하나를 더 시험했습니다. AI에게 자기가 만든 장면의 화면을 보여 주고, 3번 고치게 했습니다.

  • 대상: Claude Opus 5.5와 Gemma 4 12B QAT(생각 끔, 앞 시험에서 더 나았던 쪽). 앞 시험의 은하·바다 결과 3개씩에서 시작했습니다(6줄기씩).
  • 보여 준 것: 같은 크롬으로 열고 2초, 3.5초 뒤에 찍은 화면 2장과 브라우저 콘솔 오류 문구입니다.
  • 보낸 문장: 두 AI에게 아래 문장을 글자 하나 다르지 않게 보냈습니다. 앞의 대화는 이어서 기억하게 했습니다.

방금 답한 코드를 HTML 파일로 저장해 크롬(1280×720)으로 열었습니다. 그림 2장은 연 지 2초와 3.5초 뒤 화면입니다. 브라우저 콘솔 오류: 없음. 처음 요청: "(처음 요청 문장)". 화면을 보고 요청에 더 잘 맞게 고쳐 주세요. HTML 파일 하나에 모든 코드를 넣고, 코드만 답해 주세요.

판정은 앞과 같은 세 단계에 더해 완성도를 1~5점으로 매겼습니다. 처음 결과까지 48장을 섞고 누가 몇 번째에 만든 것인지 가린 채 먼저 매긴 뒤, 정답표와 맞췄습니다. 처음 결과 12장의 판정은 앞 시험의 판정과 모두 같게 나왔습니다.

회차별 완성도 점수 선 그래프(1~5점, 3개 평균). Claude Opus 5.5 은하 3.0, 4.0, 4.7, 4.3, 요청대로 3개 모두. Claude 바다 4.0, 4.3, 5.0, 5.0, 요청대로 3개 모두. Gemma 4 12B 생각 끔 은하 1.7, 2.3, 2.0, 2.3, 요청대로 2, 2, 2, 3개. Gemma 바다 1.0, 1.3, 1.7, 1.7, 요청대로 0, 0, 0, 1개. 한 번 고치는 데 Gemma 평균 13.9초(10.7~24.3초), Claude 그림 읽기와 저장 포함 평균 41초

처음 결과와 고친 결과를 가린 채 판정한 점수입니다.

이 그래프가 뜻하는 것은 이렇습니다. Claude는 처음부터 요청대로였지만, 화면을 보고 고칠 때마다 안개 낀 수평선, 햇빛 반짝임, 은하 팔의 색 변화가 더해졌습니다. 바다는 2번 고친 뒤 3개 모두 5점이 됐습니다. 은하는 3번째 고칠 때 오히려 조금 떨어진 것도 있었습니다.

Gemma는 조금 나아졌지만 한계가 분명했습니다. 은하는 3번 고친 뒤 3개 모두 나선이 보이게 됐습니다. 바다는 1개만 겹친 물결 모양이 됐고, 1개는 파란 띠와 검은 면으로 바뀌었습니다. 나머지 1개는 고칠수록 화면이 어두워져 마지막에는 거의 검은 화면이 됐습니다. 화면을 보고도 무엇이 잘못됐는지 짚어 내지 못한 것으로 보입니다.

바다 1번째 줄기를 2초씩 이어 붙인 8초 영상입니다(소리 없음).

출렁이는 바다 고치기 화면 모음 24장. Claude 3줄기는 처음 4점에서 2번 고친 뒤 모두 5점, 사실적 바다와 수평선. Gemma 1번째 줄기는 언덕 모양 1점, 판 가장자리 1점, 물결 판 2점, 겹친 물결 모양 3점(요청대로). 2번째 줄기는 파란 덩어리 판 1점, 매끈한 파란 곡면 2점, 2점, 파란 띠와 검은 면 1점(아님). 3번째 줄기는 어두운 판 1점, 거의 검은 화면, 희미한 수면, 거의 검은 화면

열고 3초 뒤 화면입니다. 아래 글씨가 가린 채 매긴 판정입니다.

입자 은하 고치기 화면 모음 24장. Claude 3줄기는 처음 3점에서 고칠수록 나선 팔 2개와 색 변화가 뚜렷해져 4~5점. Gemma 1번째 줄기는 나선 팔 하나 2점에서 3점, 2점. 2번째 줄기는 나선이 안 보이는 원반 1~2점에서 3번 고친 뒤 나선이 보여 3점(요청대로). 3번째 줄기는 나선 팔 하나와 고리 2점 그대로

열고 3초 뒤 화면입니다.

고친 코드 36개는 모두 오류 없이 열렸습니다. 한 번 고치는 데 Gemma는 평균 13.9초가 걸렸습니다. 그림 2장을 읽는 데 드는 시간은 1~3초였습니다. 이 PC에서 고치기를 여러 번 되풀이해도 부담이 적다는 뜻입니다. 다만 이번 결과로 보면, 결과를 크게 바꾸는 것은 되풀이 횟수보다 모델의 실력이었습니다.

Gemma 4 12B QAT를 RTX 5060 Ti 16GB에서 돌린 값

항목값
프로그램Unsloth Studio 2026.11.4 (앱 v0.1.917-beta), 엔진 llama.cpp b12340, GPU 드라이버 621.24
설정기본값(Auto). 컨텍스트 262,144가 자동으로 잡힘
로드 시간27.3초
VRAM로드 뒤 14.3GB, 생성 중 최대 14.3GB (16GB 중)
생성 속도생각 끔 평균 110.6 t/s(초당 토큰, 101.4~114.2), 생각 켬 105.9 t/s
첫 토큰까지 시간(TTFT)평균 0.1초 안팎
장면 하나 만드는 시간생각 끔 7.1~16.8초, 생각 켬 14.5~27.5초 (과제별 평균)
GPU 사용률생성 중 평균 81~83%
시스템 램PC 전체 사용 최대 11.2GB (32GB 중)

30번 만드는 데 모두 9분이 안 걸렸습니다. 같은 기본값(Auto)으로 잰 Unsloth Studio 설치 글(2026년 10월)에서는 초당 52토큰이었는데, 이번에는 약 2배 빨랐습니다. 그 사이 Unsloth Studio와 엔진 버전이 바뀌었지만, 무엇 때문에 빨라졌는지는 확인하지 못했습니다. 다른 그래픽카드와 모델의 속도는 GPU 체험에서 견줘 볼 수 있습니다.

요약 영상도 three.js로 만들었습니다

이 글 맨 위의 20초 요약 영상에 나오는 도는 상자와 3D 막대도 three.js로 그렸습니다. 영상은 HTML로 쓴 장면을 영상 파일로 바꿔 주는 오픈소스 도구 HyperFrames로 만들었습니다(HyperFrames로 요약 영상 만드는 글). three.js 장면을 영상에 넣을 때는 한 가지만 바꾸면 됩니다.

브라우저에서는 반복(⑥)이 1초에 60번 안팎으로 돌며 조금씩 움직입니다. 그런데 영상을 만드는 도구는 화면을 한 장씩 순서 없이 찍습니다. 그래서 "직전 화면에서 조금 더 돌리기"가 아니라 "몇 초째 화면인지 받아서 그 시각의 모습을 바로 그리기"로 써야 합니다. 그래야 몇 번을 만들어도 같은 영상이 나옵니다.

// 브라우저용: 직전 화면에서 조금씩 돌린다
function animate() { requestAnimationFrame(animate); cube.rotation.y += 0.01; renderer.render(scene, camera); }

// 영상용: t초째 모습을 바로 계산해 그린다
window.addEventListener("hf-seek", (e) => {
  const t = e.detail.time;          // 영상의 몇 초째인지
  cube.rotation.y = 0.6 + t * 0.6;  // t만 보고 정한다
  renderer.render(scene, camera);
});

영상을 만드는 동안에는 인터넷에서 파일을 불러올 수 없어서, three.js 파일(0.160.0, 1.27MB, MIT 사용 허가)을 받아 영상 폴더에 넣어 두고 불러왔습니다. 20초 영상을 만드는 데 RTX 5060 Ti 16GB PC에서 약 42초가 걸렸습니다.

다른 곳의 비슷한 시험과 견주면

다른 시험과 비교 표. 이 글(2026-11-15): 요청 5가지 3번씩, Claude Opus 5.5 15/15, Gemma 4 12B QAT 10/15와 8/15. 18 LLMs Build a 3D Game(aigamingdev, 2026-06-19): three.js r128 피하기 게임, 요청 2번, gemma-4-12b-qat 통과(점수 70, 691초, 8,431토큰, 16GB Mac Mini), 같은 12B의 다른 변형 2개는 실패, Claude는 시험 안 함. WorldCoder-Bench(논문, 2026-06): 과제 2,026개, 가장 좋은 GPT-5.4가 숨은 조건의 27.8%, 실패의 약 84%는 장면은 보이는데 조작이 상태를 제대로 안 바꿈. AA-3D(Artificial Analysis, 2026-10-12): 에이전트 방식, 1위 Claude Sonnet 5.5, Gemma 없음

각 시험의 공개 자료를 2026년 11월 15일에 확인했습니다.

aigamingdev의 시험에서도 Gemma 4 12B QAT는 짧은 three.js 피하기 게임을 만들어 통과했습니다. 이 글의 게임 결과(6번 중 4번)와 같은 방향입니다. 다만 그 시험은 16GB Mac Mini에서 691초가 걸렸고, 이 글은 RTX 5060 Ti에서 게임 하나에 평균 16.8초(생각 끔)였습니다. 실행 프로그램과 요청이 달라 시간을 그대로 견줄 수는 없습니다.

WorldCoder-Bench는 과제가 훨씬 어렵고 많습니다. 그 시험에서도 실패의 대부분이 '장면은 보이는데 조작하면 제대로 안 되는' 경우였습니다. 이 글의 게임 오버가 안 나오는 게임과 같은 종류의 실수입니다. 이 글의 과제는 짧고 쉬운 편이어서, Claude가 15번 모두 된 것이 어려운 과제에서도 그렇다는 뜻은 아닙니다.

그래서 무엇을 쓰면 될까요?

상황이 시험에서 본 것
처음 three.js를 배우며 도는 상자, 행성 같은 기본 장면을 만들어 보고 싶다Gemma 4 12B도 9번 모두 됨. 16GB 그래픽카드에서 10초 안팎, 인터넷 요금 없이 내 PC에서
은하, 바다처럼 모양이 중요한 장면을 한 번에 그럴듯하게 받고 싶다Claude는 6번 모두 요청대로, Gemma는 12번 중 2번
게임처럼 규칙이 있는 것둘 다 대부분 됐지만 Gemma는 겉보기만 되는 경우가 있었음. 어느 쪽이든 직접 눌러 확인할 것
결과를 보고 고치게 하기Claude는 2번 고치면 사진 같은 수준까지 올라감. Gemma는 조금 나아질 뿐, 못 하던 모양을 하게 되지는 않음
Gemma의 생각(Thinking)이번 코드 만들기에서는 꺼 두는 쪽이 빠르고 결과도 나빠지지 않음

로컬 AI의 좋은 점은 몇 번을 시켜도 비용이 들지 않는다는 것입니다. Gemma는 장면 하나에 10초 안팎이라, 마음에 들 때까지 여러 번 다시 시켜도 부담이 적습니다. Gemma 4 12B를 처음 설치하는 방법은 로컬 AI 시작하기 2편에, 이 모델을 16GB 카드에서 처음 시험한 결과는 Gemma 4 12B 16GB 글에 있습니다. three.js 전용으로 학습한 작은 모델로 장면 51개를 만든 결과는 Qwen3.5-4B-3D-Coder 글에 있습니다.

이 글의 한계

  • 과제마다 3번씩만 시켰습니다. 3번 중 몇 번으로 적었지만, 더 많이 시키면 비율이 달라질 수 있습니다.
  • 모양 판정(요청대로·일부·아님)은 화면을 보고 사람이 정했습니다. 판단이 갈릴 수 있어 9개 화면을 모두 실었습니다.
  • Claude는 클라우드에서 돌아 속도·메모리를 재지 않았고, 생성 설정과 생각 사용 여부를 정할 수 없었습니다. Claude Code 안에서 시켜 기본 안내문이 함께 들어갔습니다.
  • Gemma는 Unsloth Studio 기본값만 썼습니다. 온도를 낮추거나, 결과를 보여 주고 고치게 하면 결과가 나아질 수 있지만 시험하지 않았습니다.
  • 보고 고치기는 은하·바다 두 과제, 3줄기씩, 3번까지만 했습니다. Gemma는 생각 끔만 시험했습니다. 판정은 가린 채 했지만 두 AI의 화면 느낌이 달라 어느 쪽인지 짐작되는 그림이 많았습니다.
  • 보고 고치기에서 Gemma는 그림을 요청에 바로 넣어 받았고, Claude는 Claude Code에서 그림 파일을 읽는 도구로 열어 봤습니다. 보여 준 그림과 문장은 같지만 전달 방식은 다릅니다.
  • 요청은 모두 한국어였습니다. 영어로 시키면 결과가 다를 수 있습니다.
  • 게임 오버는 공을 가만히 두고 40초까지 기다려 봤습니다. 그 안에 끝나지 않은 2개는 코드를 읽어 원인을 확인했습니다.
  • 브라우저는 크롬 하나, 화면 크기는 1280×720 하나로만 봤습니다. 휴대폰이나 다른 브라우저에서는 보지 않았습니다.
  • Gemma의 시간과 메모리는 측정 프로그램과 평소 쓰는 프로그램 몇 개를 켜 둔 PC에서 쟀습니다. 기준 날짜는 2026년 11월 15일입니다.

자주 묻는 질문

three.js를 쓰려면 무엇을 설치해야 하나요?

아무것도 설치하지 않아도 됩니다. HTML 파일 안에서 three.js를 인터넷 주소로 불러오면 크롬이나 엣지 같은 브라우저만으로 돌아갑니다. 이 시험의 45개 파일도 모두 그렇게 만들어졌습니다. 다만 인터넷 연결이 필요합니다.

16GB 그래픽카드로도 three.js 코드를 만들 수 있나요?

네. Gemma 4 12B QAT는 RTX 5060 Ti 16GB에서 VRAM 14.3GB를 쓰며 장면 하나를 평균 10.9초에 만들었습니다(생각 끔). 도는 상자와 태양계는 3번 모두 됐고, 은하·바다처럼 모양이 중요한 장면은 자주 요청과 다르게 나왔습니다.

AI가 만든 장면이 빈 화면만 나와요. 어떻게 하나요?

먼저 인터넷이 연결돼 있는지 봅니다. 그다음 F12를 눌러 '콘솔' 탭의 빨간 오류 글자를 확인합니다. 이 시험에서는 괄호가 덜 닫히거나 선언하지 않은 변수를 쓴 것이 원인이었습니다. 오류 글자를 그대로 AI에게 붙여 넣고 고쳐 달라고 하면 대부분 쉽게 고칠 수 있습니다(이 글에서는 공정하게 비교하려고 고치게 하지 않았습니다).

AI에게 결과 화면을 보여 주면 더 잘 만드나요?

Claude는 확실히 나아졌습니다. 바다는 화면을 보여 주고 2번 고치게 하자 3개 모두 사진 같은 바다(5점)가 됐습니다. Gemma 4 12B는 은하는 조금 나아졌지만, 바다는 3번 고쳐도 3개 중 1개만 바다처럼 보였고 오히려 검게 변한 것도 있었습니다. 작은 로컬 모델은 화면을 봐도 무엇이 잘못됐는지 짚어 내기 어려운 것으로 보입니다.

Gemma 4 12B의 생각(Thinking)은 켜는 게 좋나요?

이번 코드 만들기에서는 끄는 쪽이 나았습니다. 생각을 켜면 시간이 약 2배 걸렸고, 요청대로 나온 것은 15번 중 10번에서 8번으로 줄었습니다. 간단한 산수는 생각을 끄면 5번 모두 틀린 시험(RTX 5090, 80번 글)도 있어서, 일의 종류에 따라 다릅니다.

출처

관련 게시글

댓글 0개