A Study on Visual Art Production through Collaborative Image Generation Using Artificial Intelligence and Unreal Engine

• 발행기관: 한국컴퓨터게임학회
• 저자명: 김준형(Jun Hyung KIM)
• 간행물 정보: 『한국컴퓨터게임학회논문지』제37권 3호, 85~91쪽, 전체 7쪽
• 주제분류: 공학 > 컴퓨터학
• 파일형태: PDF
• 발행일자: 2024.09.30

국문 초록

방대한 빅데이터를 기반으로 발전한 인공지능 기술은 창작과 영상 예술, 인간의 고유 영역으로 여겨졌던 분야에 큰 영향을 미치기 시작했다. 전통적으로 선형적이었던 3D 애니메이션 제작방식은 AI 이미지 생성 모델을 활용해 초기 기획, 컨셉 및 아이디어를 빠르게 비주얼화하고, 실시간 게임 엔진을 통해 실시간으로 수정 및 개선 작업을 반복하며 완성도를 높이는 비선형적 방식으로 변화하고 있다. 본 논문에서는 Stable Diffusion의 노드 기반 비주얼 스크립트인 ComfyUI를 활용한 사전 제작 과정과 iClone 및 언리얼 엔진을 통해 디지털 휴먼을 제작하고 구체화하는 일련의 파이프라인을 분석한다. 이를 통해 전통적인 파이프라인을 넘어서는 새로운 예술적 표현의 가능성을 모색한다.

영문 초록

Artificial intelligence (AI) technology is increasingly influencing creative processes, video arts, and other domains previously regarded as uniquely human. Traditionally, 3D animation production followed a linear process; however, it is now transitioning toward a nonlinear approach that leverages AI image generation models. This shift enables the rapid visualization of initial plans, concepts, and ideas while enhancing the overall quality through iterative real-time modifications and improvements facilitated by real-time game engines. In this paper, we analyze the pre-production process utilizing ComfyUI, a node-based visual scripting tool for Stable Diffusion, and examine a pipeline for creating and refining digital humans using iClone and Unreal Engine. This study seeks to explore the potential for new forms of artistic expression that transcend traditional production pipelines.

목차

1. Introduction

2. ComfyUI

3. Digital Human

4. Production of work

5. Conclusion

Reference

키워드

Generative model Unreal Engine Game AI