최고의 AI 영상 Sora로 제작하기

옮긴이 머리말 ix
시작하며 xi
이 책에 대하여 xii

CHAPTER 01 Sora를 만나다: 강력한 AI 동영상 생성 모델
1.1 Sora란? 3
__1.1.1 Sora 소개 3
__1.1.2 Sora의 기능 특징 5
__1.1.3 Sora의 경쟁 제품 비교 7
__1.1.4 Sora의 강점 10
__1.1.5 Sora의 창의적인 활용 사례 11
1.2 Sora의 등장에 우리가 고려해야 할 다섯 가지 질문 14
__1.2.1 텍스트-비디오 모델은 왜 뜨거운 관심을 받고 있는가 14
__1.2.2 Sora의 출시는 무엇을 의미하는가 18
__1.2.3 우리는 Sora와 어떤 관계인가 20
__1.2.4 Sora에 어떻게 대응해야 할까 23
__1.2.5 일반인은 어떻게 참여할 수 있는가 25

CHAPTER 02 기능 분석: Sora는 어떻게 효율적으로 동영상을 생성하는가
2.1 Sora의 기술 혁신 포인트 31
__2.1.1 다양한 동영상 포맷 지원 31
__2.1.2 개선된 화면 구도와 프레임 33
__2.1.3 언어 이해와 동영상 생성 35
__2.1.4 멀티모달 입력 처리 39
__2.1.5 영상 길이, 해상도, 화면비 조정 41
2.2 Sora의 강력한 동영상 생성 기능 43
__2.2.1 3D 일치성: 움직이는 물체와 인물을 3D로 표현하기 43
__2.2.2 장기적 일치성: 영상 속 인물과 장면을 변함없이 유지하기 46
__2.2.3 세계 상호작용 시뮬레이션: 인물과 환경 간의 간단한 상호작용 시뮬레이션 48
__2.2.4 디지털 세계 시뮬레이션: 탐험하고 창작하는 무한한 디지털 세계 49
__2.2.5 복잡한 요소 생성 기능: 사실적인 가상 장면 만들기 50
__2.2.6 멀티 카메라 생성 기능: 풍부한 시각적 향연 선사 52
2.3 Sora가 직면한 한계와 과제 54
__2.3.1 물리 세계 시뮬레이션의 한계 54
__2.3.2 길이가 긴 동영상 생성의 어려움 56
__2.3.3 복잡한 프롬프트의 이해도 59
__2.3.4 모델 훈련의 복잡성 61
__2.3.5 동영상 생성의 적시성 향상 63

CHAPTER 03 기술 원리: Sora의 기술 특성과 강점 분석
3.1 Sora의 기술 원리 분석 69
__3.1.1 Sora는 어떻게 텍스트로 콘텐츠를 생성하는가: 확산 모델 69
__3.1.2 Sora는 어떻게 복잡한 시각적 콘텐츠를 처리하는가: 시공간 패치 72
__3.1.3 Sora는 어떻게 일관된 동영상 시퀀스를 생성하는가: 순환 신경망 73
__3.1.4 Sora는 어떻게 다양한 스타일의 동영상을 생성하는가: 생성적 적대 신경망 75
__3.1.5 Sora는 어떻게 동영상 생성 속도를 높이는가: 자동회귀 트랜스포머 78
3.2 Sora 동영상 생성 과정의 3단계 80
__3.2.1 1단계: 동영상 압축 네트워크 80
__3.2.2 2단계: 시공간 잠재 패치 추출 82
__3.2.3 3단계: 동영상 생성 트랜스포머 모델 82
3.3 Sora 기술의 미래 전망 84
__3.3.1 기술 혁신과 성능 향상: 더 빠르고, 더 안정적이고, 더 원활한 경험 84
__3.3.2 분야 간 융합과 활용 분야 확장: 더 다채롭고 무한한 가능성으로 가득한 삶 85

CHAPTER 04 모델 아키텍처: Sora의 기반은 세계 모델
4.1 세계 모델 이해하기 89
__4.1.1 세계 모델이란 무엇인가 89
__4.1.2 세계 모델의 역할은 무엇인가 91
__4.1.3 멀티모달 모델이 AI의 실제 세계 이해를 촉진 92
__4.1.4 세계 모델이 가상과 현실의 경계를 허물다 94
__4.1.5 세계 모델의 대표: 런웨이 95
4.2 동영상 생성 모델을 세계 시뮬레이터로 98
__4.2.1 LLM 방법으로 동영상 이해하기 98
__4.2.2 물리 세계의 출현 구현 102
__4.2.3 실제 물리 세계의 움직임 시뮬레이션 104
4.3 Sora 모델 훈련의 핵심 기술 108
__4.3.1 자연어 이해 108
__4.3.2 생성형 AI 모델 111
__4.3.3 장면 구성 및 정교한 렌더링 114
__4.3.4 AI 기반 애니메이션 기술 117
__4.3.5 커스터마이징과 지속적인 최적화 119

CHAPTER 05 상세 기능: Sora를 사용해 빠르게 동영상 생성하기
5.1 Sora의 텍스트-비디오 생성 기능 127
__5.1.1 Sora 가입 방법 127
__5.1.2 Sora 구독 취소 방법 133
__5.1.3 Sora 사용법 135
5.2 Sora의 기타 AI 생성 기능 141
__5.2.1 이미지-비디오 생성: DALL-E 이미지로 애니메이션 만들기 141
__5.2.2 비디오-비디오 생성: 동영상 길이를 앞뒤로 확장 146
__5.2.3 비디오-비디오 편집: 동영상 스타일과 환경 바꾸기 150
__5.2.4 동영상 연결 기능: 매끄러운 전환 효과 152
__5.2.5 이미지 생성 기능: 사용자에게 뛰어난 경험 제공 157

CHAPTER 06 프롬프트 작성: 프롬프트 최적화로 Sora의 생성 효과 높이기
6.1 Sora 프롬프트 작성의 기본 165
__6.1.1 동영상 요소를 명확하고 구체적으로 설명하기 165
__6.1.2 장면의 디테일을 자세히 설명하기 166
__6.1.3 창의적으로 프롬프트 사용하기 168
__6.1.4 매력적인 캐릭터와 플롯 구상하기 169
__6.1.5 단계별 가이드 방식으로 프롬프트 구성하기 171
6.2 Sora 프롬프트 작성 기법 174
__6.2.1 Sora 프롬프트 선택 방법 174
__6.2.2 Sora 프롬프트 작성 순서 176
__6.2.3 Sora 프롬프트 작성 시 주의사항 177

CHAPTER 07 프롬프트 라이브러리: 전문가급 동영상 제작을 위한 필수 요소
7.1 Sora의 콘텐츠 기반 프롬프트 181
__7.1.1 주체 특징 181
__7.1.2 장면 특징 185
__7.1.3 예술 스타일 187
7.2 Sora의 표준화된 프롬프트 191
__7.2.1 화면 구도 191
__7.2.2 앵글 193
__7.2.3 샷 195
__7.2.4 색상 197
__7.2.5 빛 199
__7.2.6 카메라 매개변수 202

CHAPTER 08 비즈니스 실현: 텍스트-비디오로 수익 창출하기
8.1 Sora의 비즈니스 응용 시나리오 207
__8.1.1 전자상거래 제품 디스플레이 207
__8.1.2 동영상 광고 제작 208
__8.1.3 게임 개발 및 애니메이션 제작 209
__8.1.4 영화 및 TV 프로그램 제작 211
__8.1.5 교육 콘텐츠 제작 212
8.2 Sora를 활용해 여러 채널에서 수익 창출하기 214
__8.2.1 광고 수익 및 스폰서십 수익 창출 214
__8.2.2 유료 지식 콘텐츠를 통한 수익 창출 215
__8.2.3 프롬프트 거래를 통한 수익 창출 216
__8.2.4 콘텐츠 창작을 통한 수익 창출 218
__8.2.5 Sora의 다른 수익 창출 방식 220

찾아보기 223

Sora는 다양한 동영상 포맷을 지원할 뿐만 아니라 콘텐츠 생성 프로세스를 간소화합니다. 사용자는 Sora가 낮은 해상도로 빠르게 생성한 프로토타입으로 미리 보기 및 오류 수정을 할 수 있습니다. 사용자는 오류가 없음을 확인하고 Sora의 전체 해상도 모드에서 최종 생성을 마칠 수 있습니다. 이 기능은 콘텐츠 제작의 유연성과 효율성을 높여줄 뿐만 아니라 동영상 콘텐츠 제작 과정을 크게 간소화하여, 사용자가 그 어느 때보다 쉽게 콘텐츠를 제작할 수 있도록 도와줍니다.

Sora의 멀티모덜 입력 처리 기능은 사용자에게 전례 없는 수준의 창작의 자유를 제공하는 중요한 기능입니다. 텍스트 프롬프트 입력 외에도 정지 이미지나 원본 동영상을 유연하게 처리하고, 콘텐츠를 확장하고, 빈 프레임을 채우거나 스타일을 바꾸는 등의 기능이 있습니다. 따라서 Sora를 사용하여 새로운 동영상 콘텐츠를 만들 수 있을 뿐만 아니라 기존 이미지나 동영상을 소스 자료로 활용하여 더욱 풍부하고 다양한 시각 효과를 만드는 2차 창작을 할 수도 있습니다. / 예를 들어 두 개의 동영상을 Sora에 입력하여 하나의 동영상으로 만들 수 있습니다. Sora는 여러 동영상의 요소와 구성을 지능적으로 분석하여, 그에 어울리는 동영상 콘텐츠를 자동으로 생성할 수 있습니다.

AI 동영상 분야에서 동영상 확장은 중요한 기능으로, 더욱 풍부하고 흥미로운 동영상 콘텐츠를 만드는 데 도움을 줍니다. Sora가 제공하는 동영상 확장 기능을 통해 동영상을 매끄럽고 자연스럽게 만들 수 있을 뿐만 아니라, 동영상의 길이와 템포를 유연하게 조절할 수 있습니다. / 동영상을 뒤에서 확장하면 시청자가 동영상의 줄거리와 인물 관계를 더 깊이 이해할 수 있어 이야기가 더 흥미로워집니다. 동영상을 앞으로 확장하면 동영상의 특정한 디테일과 장면을 더 잘 보여줄 수 있어 시청자가 동영상의 주제와 핵심을 명확히 이해할 수 있습니다.