이번 포스팅에서는 챗GPT의 두 가지 주요 기능인 비전(Vision)과 달리3(DALL·E 3)를 연계 활용하는 방법을 소개하겠습니다.
⚠️ 챗GPT 비전, 달리3 모두 챗GPT Plus(유료 버전)에서 제공되는 기능입니다.
챗GPT 비전, 달리3
챗GPT 비전은 챗GPT의 눈과 같습니다. 사용자가 이미지를 업로드하면, 챗GPT는 해당 이미지를 인식합니다. 이제 업로드한 이미지에 대해 챗GPT와 대화를 나눌 수 있습니다.
해당 기능은 GPT-4의 디폴트 모드에서 활성화됩니다. 🖼️ 버튼을 눌러 이미지가 저장된 경로를 직접 찾거나, 이미지를 챗GPT 대화창에 드래그해서 업로드할 수 있습니다.
달리3는 챗GPT에 탑재된 AI 이미지 생성 모델입니다. 현시점 어떤 AI 이미지 생성 모델보다 명령어를 이해하는 능력이 뛰어나고, 텍스트를 이미지로 정확하게 구현할 수 있는 전 세계적으로 몇 안 되는 모델입니다.
챗GPT 비전, 달리3 연계 활용법
지금부터 챗GPT의 주요 기능인 비전과 달리3 연계 활용법 두 가지를 소개하겠습니다.
두 가지 사례 모두 아래 순서로 진행됩니다.
챗GPT에 이미지 제공 → 비전 기능을 통한 프롬프트 추출 → 추출한 프롬프트를 이용하여 달리3로 이미지 생성
1. 제품 디자인 개발 (가방)
특정 제품의 사진을 챗GPT에 업로드한 후, 챗GPT에게 사진 속 제품의 스타일, 색상, 구성 등을 분석시켜 제품에 대한 묘사를 텍스트로 확보할 수 있습니다.
확보한 텍스트를 프롬프트로 활용해서 유사한 이미지를 생성하고, 추가 요청을 통해 입맛에 맞게 이미지를 수정할 수 있습니다.
그뿐만 아니라 디자인 변경에 대해 챗GPT와 의견을 나눌 수도 있습니다.
🧿 지금부터 James 브랜드의 검정색 메신저 백을 디자인해 보겠습니다.
1. 노브랜드 메신저 백 이미지 업로드 -> 이미지 분석 후 상세 프롬프트 제공 요청
2. 상세 프롬프트 확보
3. 최초 이미지 생성
제공한 샘플 가방 이미지와 매우 유사한 이미지가 확보되었습니다.
4. 가방 색상, 가죽 로고 색상 변경
5. 로고에 브랜드명(James) 반영 완료
6. 가방을 다양한 소재로 변경
스웨이드, 패턴트 가죽, 캔버스, 코듀로이 재질의 검정색 James 메신저 백 탄생
이 방법을 통해 제품 디자인을 개발할 수 있을 뿐만 아니라 실제 제품 제작 및 판매까지도 충분히 가능해 보입니다.
2. 예술 작품 만들기
챗GPT에 예술 작품을 업로드한 후 그 작품의 색상, 표현, 주요 특징 등을 챗GPT 비전 기능을 통해 분석할 수 있습니다.
그 분석 결과를 바탕으로 원작과 유사한 분위기의 이미지를 생성할 수 있습니다.
⚠️ 챗GPT는 정책상 특정 작가의 작품을 직접 참조하지 못합니다.
⚠️ 마지막 작품이 100년이 경과한 작가의 작품은 직접 참조할 수 있습니다.
🧿 지금부터 화가 모드 루이스(Maud Lewis)의 고양이 세 마리 작품을 참조하여 곰 세 마리 이미지를 생성해 보겠습니다.
1. 이미지 업로드 → 색상, 표현, 특징 분석 요청
2. 작품의 주요 주제, 색상, 배경, 서명, 표현 등 분석 완료
3. 달리3에 입력할 상세 프롬프트 제공 요청
4. 확보한 프롬프트 그대로 입력
예시에서는 확보한 프롬프트를 그대로 입력했지만, 프롬프트 수정을 통해 원하는 결과에 더욱 근접한 이미지를 얻을 수 있습니다.
5. 이미지 생성 완료
아래는 반 고흐의 대표작인 별이 빛나는 밤(Starry Night)을 참조하여 만든 뛰어노는 어린아이의 이미지입니다.
반 고흐의 경우 마지막 작품이 100년을 경과했기 때문에 원본 이미지와 매우 유사한 이미지를 생성할 수 있습니다.
마지막 작품의 시점이 100년이 지나 이미지를 참조할 수 있는 대표적인 화가와, 그 화가의 대표 작품 리스트는 아래와 같습니다.
| 작가명 | 대표작 |
| 빈센트 반 고흐 | 별이 빛나는 밤(Starry Night), 해바라기(Sunflowers) |
| 레오나르도 다 빈치 | 모나리자 (Mona Lisa), 마지막 만찬(The Last Supper) |
| 요하네스 베르메르 | 진주 귀고리를 한 소녀(Girl with a Pearl Earring) |
| 에드바르트 뭉크 | 절규(The Scream) |
| 클로드 모네 | 수련 연못(Water Lilies), 풀밭 위의 점심(Luncheon on the Grass) |
| 피에르 오귀스트 르누아르 | 물랭 드 라 갈래트의 무도회(Dance at Le Moulin de la Galette) |
| 파울 클레 | 금붕어(Goldfish) |
| 미켈란젤로 | 아담의 창조(The Creation of Adam), 다비드상(David) |
지금까지 챗GPT 비전, 달리3 기능을 연계 활용한 두 가지 사례를 소개했습니다.
현재 챗GPT에서는 제공되지 않지만, 미드저니를 포함하여 Image to Image(업로드한 이미지를 직접 참조해서 새로운 이미지를 생성하는 방식) 기능을 제공하는 툴도 다수 존재합니다.
이 방식을 사용하면 조금 더 편리하게 기존의 이미지를 참조하여 새로운 이미지를 생성할 수 있습니다.
하지만 챗GPT처럼 이미지 생성 이후 후속 작업을 채팅으로 진행할 수 있고, 챗봇의 조언도 구할 수 있으면서 퀄리티까지 뛰어난 AI 모델은 현재로서는 챗GPT가 유일합니다.
챗GPT에는 비전과 달리3 외에도 다양한 기능이 탑재되어 있고, 앞으로도 새로운 기능이 계속해서 추가될 예정입니다.
제가 소개한 방법 외에도 챗GPT의 다양한 기능을 연계 활용하는 방법은 사용자에 의해 계속 발견될 것으로 보입니다.
독자분들께서도 자신만의 방법을 찾아 챗GPT의 활용도를 더욱 높여 보시기 바랍니다.
이상으로 챗GPT 비전, 달리3 연계 활용법에 대한 포스팅을 마무리하겠습니다.
저는 AI 아티스트 모여라~! 네이버 카페를 운영하고 있습니다. AI 이미지 생성에 관심 있는 모든 분을 환영합니다.