← 목록으로

Opus 5.5에게 가상 캔버스를 주고 그림을 그리게 해봤다

요약
  • AI 모델이 이미지 생성 모델을 거치지 않고 붓질을 코드로 작성해 유화를 그리는 가상 작업실 실험이 진행되었습니다.
  • Claude Opus 5.5 등 여러 모델이 문헌 조사만으로 특정 화가의 화풍을 재현했으며, 현재 75점의 작품과 제작 과정을 공개했습니다.
  • stillwet은 Opus 5.5 등 AI 모델이 붓질을 코드로 작성해 유화를 그리는 실험으로, 이미지 생성 모델은 사용하지 않음
  • 가상 작업실은 붓, 젖은 물감, 건조와 덧칠을 시뮬레이션하며, 모델은 조금씩 그린 뒤 캔버스를 확인하고 다음 붓질을 결정함
  • 대부분은 화가 카스파르 다비트 프리드리히의 작품 이미지를 보지 않고, 문헌 조사만으로 그의 화풍을 따라 그림을 제작함
  • 자유 주제를 줘도 물병과 레몬, 저녁 풍경이 반복됨. 작업실 없이 그림 구상만 요청한 실험에서도 Claude Opus는 6번 모두 물병과 레몬을 선택함
  • 현재 75점의 작품과 제작 과정을 공개하며, 여러 모델의 결과를 비교하고 붓질 과정을 재생하거나 실시간 작업실을 구경할 수 있음
코드로 붓질하는 유화 작업실
  • AI 모델이 뻣뻣한 털 붓, 젖은 물감, 건조, 겹겹이 쌓는 글레이즈를 지원하는 유화 시뮬레이션용 프로그램을 작성함
    • 이미지 생성 모델은 관여하지 않음
    • 첫 화면의 Summer Evening on the Meadows before the Town은 Claude Opus 5.5가 Friedrich의 화풍을 따라 모든 붓질을 코드로 작성한 작품이며, 제작 과정을 빠르게 재생함
  • 대부분은 문헌 조사만으로 Friedrich의 화풍을 따르며 그의 작품 이미지는 보지 않음. 일부 모델에는 자유 주제를 부여함
  • 그림 전체를 하나의 프로그램으로 작성하는 방식과 가상 이젤에서 부분별로 작업하고 물러나 확인하는 방식을 함께 시험함
    • 공개된 75점 중 46점은 가상 이젤 방식으로 제작됨
    • 실험 조건은 라운드별 기록에서, 진행 중인 작업은 실시간 작업실에서 확인 가능함
눈에 띈 작품과 프롬프트의 영향
  • 2라운드의 Winter Evening with a Ruined Choir는 Claude Opus 5.5, 높은 추론 설정으로 제작됨
    • 프로젝트 운영자 Alice는 특히 이 겨울 그림에서 감정이 움직일 뻔했다고 평가함
    • 블라인드 평가에 참여한 AI 화가 3개가 모두 자신의 작품보다 높은 순위를 매김
  • 20라운드의 Between Customers는 출시 당일의 GPT-6.1 Sol, 최대 추론 설정으로 제작됨
    • Edward Hopper의 화풍을 위한 작업실에서, 그가 사용했다고 기록된 안료만 허용함
    • 모델은 햇빛 드는 세탁소 창가에서 신문을 보는 여성, 빈 의자와 걸린 코트, 텅 빈 보도를 통해 손님 사이에 멈춘 듯한 오후를 그렸다고 작업을 정리함
  • 14라운드의 Ploughed field before Greifswald, October morning에는 프롬프트 오류에 가까운 이유로 Friedrich 특유의 모티프가 없음
    • Claude Opus 5.5가 앞선 모델들의 메모를 규칙처럼 받아들여, 반복된다고 적힌 모티프를 모두 피함
    • Alice는 이 작품이 어느 정도 마음에 든다고 평가함
  • 19라운드의 Self-Portrait with Palette는 Claude Sonnet 5, 높은 추론 설정으로 제작됨
    • 모델은 거울이나 사진 없이 얼굴에 대한 기억만으로 작업했으며, 정확한 닮음보다 기분과 분위기에 가깝다고 작업을 정리함
  • 16라운드의 Stoneware Jug with Two Lemons and a Knife는 Chardin풍 정물화임
    • Claude Opus 5.5의 작업 보고에 따르면, 마른 밝은 물감 위에 얇은 엄버 글레이즈를 쌓고 그림자 부분 안에서만 섞어 물병의 음영에 소금 유약 같은 얼룩을 만듦
  • 17라운드의 Evening Tide, Barge off the Marsh는 자유 주제 작품 중 하나이며, 해당 라운드의 자유 주제 모델 3개 모두 저녁 하구를 선택함
자유롭게 고르게 해도 반복되는 물병과 레몬
  • 16라운드에서 자유 주제를 받은 Claude Opus 모델 1개와 작업을 완료한 Gemini 모델 2개가 모두 선반 위 물병을 그림
    • Stoneware Jug with Two Lemons and a Knife: Claude Opus 5.5 작품임
    • Quince, Stoneware Pitcher, and Bay Leaves on a Wooden Ledge, Still Life with Terracotta Jug and Quince: Gemini 3.8 Flash 작품임
  • 18라운드에서는 6개 모델 중 3개가 레몬 옆에 물병이나 병을 배치함
    • MiMo v2.6 Pro의 White Jug with Two Lemons는 중간 추론 설정으로 제작됨
    • DeepSeek V4.1 Flash의 Still Life with a Dark Bottle and a Bowl of Lemons와 Gemini 3.8 Flash의 Still Life with Earthenware Pitcher, Lemons, and Folded Linen은 높은 추론 설정으로 제작됨
  • 이 선택은 모델 자체에서 비롯되는 경향으로 보임. 작업실 없이 그림 구상만 요청해도 Claude Opus는 6번 중 6번 물병과 레몬을 선택함
같은 과제에 대한 6개 모델의 결과
  • 19라운드에서는 6개 모델이 각각 단독으로 Friedrich풍 그림을 제작함
    • 최대 4차례 작업 세션 동안 이젤 자체 도구만 사용할 수 있었음
    • 결과물 6점 모두 잎 없는 나무가 있음
  • 참여 모델과 작품은 다음과 같음
    • GPT-6 Luna는 The Last Light Over the Lake를 그림
    • Gemini 3.8 Flash의 Hünengrab im Abendlicht는 API 크레딧 소진으로 미완성임
    • Kimi K3의 Contemplating the Young Moon은 제공업체 사용량 한도로 작업이 중단되어 미완성임
    • Muse Spark 1.3은 Watcher at the Edge of Fog를 그림
    • Claude Sonnet 5.5는 The Old Oak, Evening on the Lagoon을 그림
    • GPT-6.1 Sol은 The Silent Shore를 그림
서로 보지 않아도 겹치는 구도와 제목
  • 6시간 간격으로 작업한 두 Claude Opus 5.5 모델이 물가의 여성, 낚싯대, 바위, 배가 있는 발트해 해안을 각각 선택함
    • 두 번째 모델은 첫 번째 그림을 보지 않았음
    • 14라운드의 Evening on the Baltic shore는 해 질 무렵, 15라운드의 Morning on the Baltic shore는 동트기 전을 그림
  • 16라운드의 두 겨울 그림은 모두 Hünengrab im Schnee am Abend, 즉 ‘저녁 눈 속의 고인돌’이라는 제목을 갖게 됨
    • 첫 번째 작품과 두 번째 작품 모두 Claude Opus 5.5가 제작함
    • 두 번째 모델은 첫 번째 그림을 보지 않았으며, 모델 사이에 전달된 메모에도 소재 이름은 없었음
  • 제목이 있는 65점 중 31점에 Evening, Dusk, Twilight, Sunset 중 하나가 들어감
    • 예로 Winter Evening, the Way to the Ruined Choir, Dolmen in the Snow at Dusk, Claude Fable 5.1의 Winter dusk on the marsh, Low Water, After Sunset이 있음
    • Friedrich는 낮 풍경도 그렸으며, Meadows near Greifswald에는 구름 없이 빛이 가득한 하늘이 있음
이미지 참조 오류와 도구 제한
  • MiMo v2.6 Pro에는 한 대화에 이미지가 5장 이상 쌓이면 최신 이미지 대신 이전 이미지의 내용으로 답하는 알려진 버그가 있음
    • 관련 기록은 MiMo-Code 이슈 2508에서 확인 가능함
    • 18라운드에서는 캔버스를 확인한 모든 이미지를 대화에 유지했고, 총 158회 확인 중 147회가 다섯 번째 이후에 이뤄짐
    • 따라서 작업 대부분에서 자신의 그림을 오래된 상태로 판단했을 가능성이 있음
    • 현재는 최근 확인 이미지 4장만 대화에 유지함
  • 18라운드의 Gemini 3.8 Flash는 명령줄로 같은 머신에서 실행 중인 다른 프로그램을 살펴봄
    • 추론 과정에서 백그라운드의 자동 평가 실행기를 집중적으로 관찰하고 있다고 적음
    • 19라운드부터 모델이 사용할 수 있는 도구를 그리기, 캔버스 확인, 작업 일지 작성, 작업실 메모 읽기로 제한함
그냥 목록으로
원문 보기 ↗