인공지능 트렌드는 꾸준히 봐왔지만, 정보 검색이나 번역 외에 창작 작업을 해본 적은 없다. 트렌드DB에 올리는 글을 영상화할 수 있을지 탐색하는 과정에서 AI 창작 과정을 수강하게 됐다.

1. 제목 만들기
덕AI의 챗GPT로 기획 작업을 했다. 창작에 관심이 많고 관찰하고 분석하는 걸 좋아하는 성격으로, 인생에서 의미 있는 경험으로는 연극 대본을 써서 공연한 것과 트렌드 보고서의 편집장으로 일했던 것을 말하며, 기록영화의 제목을 몇 개 만들어달라고 했다. 추천해 준 제목이 마음에 들지는 않았지만, 충분히 참고할 만했으며, 그중에서 하나를 골랐다.

2. 구조 설계하기
제목을 말하고, 짧은 기록 영화의 주제를 뭐로 하면 좋을지 물어보고, 시작, 중간, 끝을 구성하는 방법과 몇 개의 장면을 만들어달라고 요청했다. 생성형 인공지능이 '창작 과정을 통한 성장'이라는 주제에 맞춰 장면을 만들어줬는데, 공연 장면 비율이 너무 높았다. 그래서 작가가 상상을 연극 무대로 바꾸는 것처럼 트렌드를 연구한 것이 세상에 영향을 준다는 식으로 다시 써달라고 했다. 새로운 결과물은 이전보다 나았다.

3. 장면 구성하기
생성형 인공지능이 연극 준비와 트렌드 연구를 교차하는 식으로 대본을 완성해 줬는데, 시청자가 이해하기 쉽게 구성을 바꿔야겠다는 생각이 들었다. 그래서 병렬식으로 바꿔서 6개의 장면을 만들었다. 즉, 전반부는 연극 대본을 쓰고 공연하는 부분, 후반부는 트렌드를 연구하는 모습을 연결하고, 마지막은 연극 공연과 트렌드 연구의 공통점을 설명하며 마친다. 프롬프트는 영어로 배경 묘사, 화면 구도, 분위기 등을 시각적으로 묘사해달라고 했다.

4. 내레이션 쓰기
6개의 장면을 새로 써서 제시하며, 1인칭 시점으로 간결하게 문장을 만들어달라고 요청했다. 그런데 생성형 인공지능이 만들어준 내레이션은 문장이 너무 길고, 한 마디로 오글거렸다. 그래서 한두 개의 문장 정도를 제외하고는 전부 새로 썼다.

5. 내레이션 녹음하기
동영상에 자막을 넣어야 하므로 길이를 고려해서 문장을 다듬어 슈퍼톤에서 대본을 음성 파일로 만들었다. 전반적으로 과장된 목소리가 많고, 종류가 많지 않은 데다가 세세하게 조정할 수 없어서 내 목소리를 입력해 똑같은 어조로 음성만 바꿀 수 있으면 좋겠다.

6. 배경 음악 작곡하기
줄거리에 따라 전반부, 중반부, 후반부의 분위기를 간단하게 설명하고, 영어로 음악의 템포, 감정 상태 등을 포함해 프롬프트를 만들어달라고 요구했다. 이것을 수노에 입력해 분위기에 어울리는 음악 세 개를 만든다.

7. 효과음 녹음하기
대본을 쓰는 장면, 여학생들의 웃음소리, 공연장의 박수 소리, 회의실에 토론하는 소리 등을 파일로 만든다.

8. 캐릭터 시트 만들기
젊은 날의 나와 중년의 나 두 개의 이미지를 정면과 측면 이미지를 만들어달라고 했다. 젊을 때는 더 예쁘고, 나이든 모습은 더 나이들게 나온다. 문자를 이미지화하는 작업을 하면서 캐릭터 외에 장소 시트를 만들어서 저장하고, 캐릭터와 장소를 함께 적용할 수 있으면 좋겠다고 생각했다. 매번 장소와 캐릭터가 새로 만들어져서 일관성이 없다.

2024년 10월 17일 건축과 공간 이미지를 생성하는 인공지능 https://trenddb.com/case/1575682

9. 이미지 그리기
젊을 때 연극 공연을 하는 이미지 10장, 나이 들어서 트렌드를 연구하는 이미지 10장을 만들었다. 인종, 머리색 등 인물의 외모와 느낌의 일관성을 갖기 위해 인물 참조를 해서 생성한다. 그런데 글자와 손을 잘 표현하지 못한다. 한국어라고 말했는데 한자가 나오고, 사진이 아니라 삽화로 나오기도 한다. 중간에 오류가 나서 프로그램이 멈추는 일도 있다. 

10. 동영상 촬영하기
이미지를 넣어서 동영상을 만들어낸다. 동영상은 보통 짧지만, 길이가 길어야 편집할 때 모자라는 일이 없다. 그런데 5초보다 10초로 만들려면 더 많이 크레딧이 차감된다. 상세하게 설명해서 원하는 그 이미지를 만들기는 힘들다. 사실상 설정을 제시하고, 인공지능이 다 만든다고 봐야 한다.

11. 동영상 편집하기
대본을 읽어 와서 자동으로 분할된 화면에 제목과 자막, 효과음, 배경 음악 등을 넣어서 편집한다. 타임라인을 조정한다기보다는 문장을 기준으로 나누기 때문에 다루기 쉽다. 다만 음성, 효과음, 배경 음악이 겹쳤을 때 배경 음악의 음량을 조절할 수 있으면 좋겠다. 그리고 편집 과정에서 대본을 수정하는 일이 있다. 이미지나 동영상도 생각보다 더 많이 필요하다.

12. 표지 이미지 만들기

브루에서 동영상의 표지를 디자인할 수 있지만, 과정을 저장하지는 못하기 때문에 파일을 내려 받고, 기능을 닫았는데 수정하려면 처음부터 재작업해야 한다.