내장 자막(Embedded Captions)
하나의 카탈로그, 미리 선택 (CATALOG.md — 17개의 아이덴티티; 그 뒤에 있는 세 가지 엔진은 백엔드 세부 사항입니다). Standard(기본값)은 깔끔한 레일(대부분의 텍스트를 담는 하단 1/3 자막) + 정점에서 피사체 뒤 장면에 합성되는 임베드 클라이맥스를 만듭니다. Cinematic은 순수 임베드입니다 — 레일 없이, 모든 캡션이 피사체 뒤에 합성됩니다(히어로 타이포그래피, 누적, 효과로서의 폐색). Theme은 완전한 테마 헌법입니다 — 바디 패러다임 × 히어로 세트피스 × 전면 FX × 플레이트 반응으로, 레지스트리(themes/README.md)에서 구성됩니다: ordnance terminal neonsign stardust stomp. 대부분의 설명/내레이션은 Standard입니다; 임베드는 드물게 사용되는, 가치 있는 정점입니다 — 모든 단어를 임베드하는 것은 흔한 실수입니다; Theme은 VFX 수준의 요청("炸", "特效", "像 AE 做的")을 위한 것입니다.
운영 흐름 (요약)
아래의 장인 정신이 담긴 산문은 깁니다; 파이프라인 자체는 짧습니다 — 그리고 결정론적인 모든 것은 계산되거나 컴파일되며, 수동으로 작성되지 않습니다:
- 의사 결정 게이트 (잘못된 클립 거부) → CATALOG.md에서 ONE 아이덴티티 선택 (17개 아이덴티티; 엔진/컴파일러는 조회로 파생 — 모드/카테고리 질문을 표면화하지 마세요)
hyperframes init(비디오가 이미 포함된 프로젝트 디렉토리가 있으면 건너뜁니다 —matte.cjs/transcribe.cjs는 디렉토리의 모든 비디오를 source.mp4로 채택합니다) →bash scripts/prepare.sh <project>(matte ∥ transcribe ∥ audio-envelope 병렬 실행, 그 다음 씬 팔레트/광학/조명을 사용한 safe-zones v2 — 하나의 명령, 잊지 않음)- 작은 JSON 창작 선택 작성 (먼저
safe-zones.json읽기): Cinematic →plan.json→fill-timings.cjs→fit-fonts.cjs→make-composition.cjs; Theme →theme.json→make-theme.cjs(rail/panel/poem/takeover 패러다임;anchor는 조용한 레일 기본값) - 시각적 QA:
node scripts/preview-frames.cjs <project>→ 약 2초/프레임의 신뢰할 수 있는 합성 미리보기 (렌더링 없음). 렌더링 비용을 지불하기 전에 § 시각적 QA 확인하세요. render-and-composite.sh→ 게이트 (타이밍 / 폐색+히어로 / 오버플로우 / 핸드오프) →final.mp4
사람들이 놓치는 중요한 규칙:
- 레일 (기본값) + 임베드 (승격).
drop(필러, 표시되지 않음) /rail(정확한 하단 1/3 자막, 앞에, 대부분의 텍스트 담당) /embed(피사체 뒤에 합성되는 정점 단어). Standard 모드는 둘 다 수행하며, 정점만 임베드합니다. § 캡션 모델 참조. - 비디오는 수정되지 않고 제공됩니다 (Standard/Cinematic; Theme 모드의 PLATE 예산은 허용된 유일한 예외입니다 — 테마 DNA별로 정의되고 마테 합성 후 적용되는 레지스터 게이트 반응 비트(charge-dim, punch, shake, grain)로 피사체+텍스트+플레이트가 하나의 프레임으로 움직입니다) — 캡션만 추가됩니다; 마테는 피사체가 임베드 트랙을 가리게 할 뿐입니다. 푸티지를 등급/재색/스캔라인 처리하지 마세요.
- 두 가지 규칙서: 레일 → references/rail.md (얇음), 임베드 장인 정신 → references/composition-craft.md (풍부, 임베드 전용). 필요에 따라 훑어보세요.
캡션 모델 — 레일 + 임베드
모든 말한 구절은 다음 세 가지 중 하나입니다:
| 무엇 | 표시 방법 | |
|---|---|---|
| drop | 필러 — 음/어, 말 더듬, 자기 수정 | 표시되지 않음 |
| rail | 기본값 — 일반적인 말한 내용 (정확히) | 깔끔한 하단 1/3 자막, 앞에, 읽기 쉽게. 강조 단어는 인라인 emphasis 하이라이트(액센트 색상 / 활성 단어 팝)를 얻을 수 있습니다 — 레일에 남아 있습니다. |
| embed | 승격된 정점 — 헤드라인 비트 | 피사체 뒤에 합성된 큰 단어 하나 (마테 폐색), 디자인된 진입 + 퇴장 |
레일은 대부분의 텍스트를 담당합니다; 임베드는 드물게 사용되는, 가치 있는 정점입니다. 희소성은 클립당이 아닌 비트/블록당입니다: 블록(생각)당 ≤1 히어로, 두 개가 동시에 보이지 않음, 히어로 창 사이에 ≥ 한 비트의 공기 (컴파일러가 0.6초 미만 경고). 짧은 클립 → 보통 1–2개; 긴 설명 → 섹션당 약 하나. 여러 히어로 중에서 가장 큰 작성된 것이 APEX입니다 (전체 잠금 임베드 + 너비 맞춤 상승을 얻습니다); 더 작은 것은 MINOR 피크로, 전경(감쇠된 모션)에서 과장된 강조선으로 컬럼을 탑니다 — 모든 비트가 마테 쇼케이스를 필요로 하는 것은 아니며, 이것이 바로 APEX를 이벤트로 유지하는 이유입니다. 모든 단어를 임베드하는 것은 여전히 흔한 실수입니다.
레일 표면 아이덴티티는 정확히 이것을 구축합니다 (rail = rail.html, embed = index.html의 클라이맥스). 컬럼 플로우 아이덴티티는 레일을 버리고 모든 것을 임베드 스타일로 만듭니다 — 단어를 반드시 읽어야 하는 설명/내레이션이 아닌, 분위기-우선 요청에만 권장합니다 (CATALOG.md는 아이덴티티별로 이를 인코딩합니다).
단계 0 — CATALOG에서 ONE 아이덴티티 선택
하나의 프론트엔드, 그 뒤에 세 개의 엔진. 사용자는 CATALOG.md에서 IDENTITY를 선택합니다 (17개 항목: 12개 클래식 + 5개 테마); 엔진, 컴파일러 및 작성 파일은 카탈로그 행에서 조회로 파생됩니다. "Standard vs Cinematic vs Theme"을 질문으로 표면화하지 마세요 — 그것들은 백엔드 이름입니다 (제품은 여러 엔진이 있더라도 하나의 UX를 가집니다). 카탈로그는 라우팅에 필요한 모든 것을 인코딩합니다: 읽기 표면, 음성, 추천 대상, 씬 요구 사항, 진정으로 가까운 쌍(loud↔ordnance, neon↔neonsign, cream↔stardust)에 대한 인접성 참고 사항.
절차: 클립 조사 → 카탈로그에서 2–3개 아이덴티티 숏리스트 → 한 줄 이유와 함께 ONE 추천 → 사용자가 선택 → 해당 아이덴티티의 파일 작성. 아이덴티티는 엔진에 잠겨 있습니다 (교차 조합 없음; 하나를 여는 것은 검증 이벤트입니다 — dna/README.md 참조).
항상 추천을 제시하고 작성 전에 사용자가 선택하도록 하세요. 조용히 기본값으로 설정하지 마세요.
(전체 아이덴티티 테이블은 CATALOG.md에 있습니다 — 라우팅을 위한 단일 진실 공급원. 아래 엔진 문서는 각 백엔드의 작성 계약을 설명합니다.)
추천 휴리스틱: CATALOG.md의 "숏리스트 휴리스틱"을 사용하세요 — 아이덴티티 수준입니다 (예: "炸"는 ordnance/stomp/terminal/loud를 숏리스트에 올리고 무엇이 폭발해야 하는지에 따라 선택), 절대 카테고리 수준이 아닙니다. 확실하지 않으면 → anchor.
- Cinematic → 잠긴 템플릿에 대해
plan.json을 작성하고,make-composition.cjs에 의해 컴파일됩니다. - Theme → themes/README.md를 읽고,
theme.json을 작성하고,scripts/render-theme.sh를 실행합니다 (컴파일 + 렌더링 + 플레이트 반응 → final_fx.mp4).
의사 결정 게이트 — 먼저 실행
비디오를 조사하고 두 모드 전에 씬을 분류하세요.
ffprobe <video.mp4> # 사양
ffmpeg -ss <t> -i <video.mp4> -vframes 1 sample.png # 20/50/80% 지점에서
샘플을 읽으세요. 다음 경우 거부:
- 여러 화자 / 하드 컷 (각 샷을 분할 및 렌더링하거나 거부)
- 사람 피사체 없음 (이 스킬은 토킹헤드용)
- 3초 미만, 음성 없음, 또는 얼굴이 명확하게 보이지 않음 —
transcribe.cjs는 오디오가 거의 무음일 때 경고합니다 (Whisper는 침묵 위에 "Thank you." 같은 단어를 환각할 수 있습니다); 경고를 따르고 거부하여 조작된 단어를 캡션하지 마세요 - 소스에 이미 하드코딩된 캡션/자막/무거운 텍스트 그래픽이 있음 — 두 번째 캡션 시스템을 추가하면 충돌이 발생하고 푸티지는 수정되지 않고 제공됩니다 (덮기/인페인팅 없음). 하드코딩된 텍스트는 종종 클립 중간에만 나타납니다: 1fps 컨택 시트를 샘플링하세요 (
ffmpeg -i in.mp4 -vf "fps=1,scale=160:-1,tile=10x5" sheet.png), 3개의 스팟 프레임만 믿지 마세요. - 트랜스크립트가 쓰레기임 — 비원어민/강한 악센트 음성은 자신감 있는 횡설수설로 전사될 수 있습니다. 작성 전에
transcript.json을 상식적으로 읽으세요; 언어로 구문 분석되지 않으면WHISPER_MODEL=medium을 한 번 시도하고, 그렇지 않으면 거부하세요 (조작된 단어의 정확한 레일은 캡션 없는 것보다 나쁩니다). - 빠른 움직임이 있는 바쁜 핸드헬드 (마테 깜빡임)
사전 점검 프로브 (비용 없음, 최악의 실패 방지)
- 샷 컷 프로브. 20%, 50%, 80% 지점에서 프레임을 샘플링합니다. 다른 피사체/씬이 나타나면 컷 전에 클립을 트림하세요.
- 레터박스 / 필러박스 프로브. 첫 번째 프레임에 검은 막대가 있습니까? 안전한 콘텐츠 사각형을 계산하고 그 안에 캡션 배치를 제한하세요.
- 휘도 프로브. 캡션 영역의 평균 휘도를 샘플링합니다 —
60 미만→ 밝은 텍스트가 그대로 읽힘,60-180→ 글리프 스크림 추가,180+→ 불투명 텍스트 + 스크림 (절대 맨 밝은 텍스트 사용 금지). Cinematic 템플릿은 cream+screen으로 LOCKED — 이 프로브를 사용하여 _적합한 아이덴티티를 선택_하세요 (밝은 씬 →ink, 또는 불투명 레일anchor테마), 절대 아이덴티티를 다시 색칠하지 마세요. - 톤에 따른 아이덴티티 추천 (당신이 추천; 사용자가 선택 — 단계 0 + CATALOG.md 참조). 설명 / 인터뷰 / 반드시 읽어야 하는 단어 → 레일/패널 표면 아이덴티티; 시적 / 소셜 / "시네마틱" → 레지스터에 따른 컬럼 플로우 아이덴티티; "炸 / 特效 / VFX" / 명명된 세계 → 테마 아이덴티티. 확실하지 않을 때 →
anchor(단어 읽힘, 씬 안전) — 하지만 숏리스트를 제시하고 사용자가 선택하도록 하세요.
파이프라인 — 5단계
1. hyperframes init <project> --non-interactive --video <video.mp4> --skip-skills
2. bash scripts/prepare.sh <project> # matte ∥ transcribe (병렬) → safe-zones. 하나의 명령.
# → frames_fg/ transcript.json safe-zones.json
3. [에이전트 단계 — 유일한 창의적 단계] 작은 JSON 작성; 아래 모드별 참조
Cinematic: plan.json 작성 → node scripts/fill-timings.cjs → fit-fonts.cjs → make-composition.cjs
Theme: theme.json 작성 → bash scripts/render-theme.sh <project> (컴파일 + 렌더링 + 플레이트 FX)
4. node scripts/preview-frames.cjs <project> # ~2초/프레임 합성 미리보기 → § 시각적 QA (렌더링 전)
5. bash scripts/render-and-composite.sh <project> # 게이트 → final.mp4 + history/ 스냅샷
(Theme 모드: 3b/5단계 건너뜀 — render-theme.sh가 이미 컴파일 + render-and-composite
+ _postfx.sh를 실행; 결과물은 final_fx.mp4, final.mp4는 플레이트 반응 전)
단계 3은 모드에 따라 다릅니다:
단계 3 — Cinematic 모드 (순수 임베드)
- 먼저
safe-zones.json을 읽으세요. 내레이션 평면은zones.hugLeft/hugRight에 들어갑니다 — 실루엣에 인접한 깨끗한 스트립 (몸에서 먼 텍스트는 떠 있는 것처럼 읽히며, 임베드되지 않음; 먼 구석은 기본값이 아닌 대체 위치입니다). 히어로는 기본적으로heroAnchor/heroBands.best(피사체 위에 중앙 정렬, ~30–55% 폐색됨)입니다.recommendation:"fg"는 가독성을 위해 NARRATION을 앞으로 이동시킵니다; 히어로는heroBands.feasible할 때마다 임베드된 상태를 유지합니다 — 히어로-fg는 최후의 수단입니다. - DNA는 단계 0에서 선택한 아이덴티티입니다 (CATALOG.md) — 여기서 선택을 다시 열지 마세요. 씬에 대해 타당성 검사를 하세요 (밝은 히어로 밴드 휘도 > 150은
ink를 원함; 전체 선택 가이드는 neon/glitch/chrome/velocity를 포함한 모든 10개를 다루는 카탈로그에 있습니다). 선택 + 이유를 명시하세요; 사용자가 결정합니다. DNA는 유형/팔레트/블렌드/모션 + 히어로 3막을 잠급니다; safe-zones v2 (palette/optics/lighting)는 이를 THIS 씬에 자동으로 매개변수화합니다. <project>/cinematic.json작성 —"dna": "<name>"+ 생각-BLOCKS, 원시 그룹이 아님: 각 블록 = 단어 라인들 (절 경계에서 2–5개로 그룹화) + 스택이 쌓일 평면 + 라인당css(크기/두께/스타일만 — 위치 없음) + 최대 ONE 라인이"hero": true로 표시 (승격된 단어; 표시 형식의"text"). 스키마:scripts/make-cinematic.cjs헤더.- 컴파일:
node scripts/make-cinematic.cjs <project>— 블록을 낮춰서 plan.json → index.html. 다음이 생성됩니다: 트랜스크립트 순서 타이밍, 블록 내 누적, 블록 간 페이지 넘김, 히어로 LOCKUP (히어로 블록의 사전 컨텍스트, HERO 및 사후 컨텍스트가 피사체 위에 중앙 정렬된 하나의 결합된 구성으로 쌓임 — 읽기 순서 위→아래 = 구성에 의한 발화 순서; 컨텍스트는 FRONT에 떠 있는 반면 히어로는 BEHIND에 임베드됨 = 깊이 샌드위치; 질량 규칙이 히어로가 컨텍스트를 지배하도록 함), apex/minor 히어로 분할, 구성에 의한 읽기 순서, safe-zones별 fg 대체. 그런 다음 게이트가 평소대로 실행됩니다. (plan.json을 직접 수동으로 작성하는 것은 블록이 표현할 수 없는 디자인에 대해 여전히 가능합니다 — 그런 다음fill-timings.cjs+fit-fonts.cjs+make-composition.cjs를 직접 실행하세요.)
단계 3 — Theme 모드 (테마 헌법)
먼저 themes/README.md를 읽으세요 — 패러다임/세트피스 레지스트리, 연결, 하드 규칙 및 정확한 theme.json 스키마.
- 콘텐츠 레지스터별 테마 DNA 선택 (각
themes/<name>.json은voice+when을 가짐). 선택 + 이유를 명시하세요; 사용자가 결정합니다. <project>/theme.json작성 —dna,lines(정확히, 트랜스크립트 순서; 각각 1–5단어 —takeover의 경우 각 라인은 하나의 CARD),minors(강조 단어),hero:{match}(클라이맥스 단어/구; 임베드 세트피스의 경우lines에서 빼고, 인라인 세트피스 및 패널+redact의 경우lines에 유지).- 렌더링:
bash scripts/render-theme.sh <project>— 컴파일 (컴파일 타임에 정확성 게이트), 두 레이어 렌더링, 합성, 플레이트 반응 적용 →final_fx.mp4. 시각적 QA를 위해 컴파일과 렌더링 사이에preview-frames.cjs를 사용하세요.
시각적 QA — 렌더링 전에 미리보기
node scripts/preview-frames.cjs <project> [t…]는 약 2초마다 신뢰할 수 있는 미리보기 프레임을 합성합니다
(검색 시간에 캡션 레이어 스크린샷 + 실제 비디오 프레임 + 마테 폐색 + 레일 오버레이 = 최종 합성이 그 순간 어떻게 보일지). 기본 샘플 = 각 그룹/클라이맥스 창.
전체 렌더링은 몇 분이 걸립니다 — 레이아웃 문제를 _발견_하는 데 사용하지 마세요.
다음 목록에 대해 미리보기(<project>/preview/sheet.png)를 확인하세요 — 기하학적 게이트가 잡을 수 없는 실패입니다:
- 와시 아웃 — 밝은 배경 위의 밝은 텍스트 (또는 어두운 배경 위의 어두운 텍스트). 캡션은 대비가 있어야 합니다. 문제가 있으면: 더 짙은 테마로 전환하거나(SCENE의 밝은 영역에 대해
ink) 스크림(배경과 텍스트 사이에 반투명 레이어)을 수동으로 추가하세요. - 폐색 누출 — 피사체의 실루엣이 임베드된 텍스트를 완전히 덮지 않아 텍스트 일부가 피사체 "위에" 떠 있는 것처럼 보입니다. 마테를 확인하세요 (
frames_fg/에 에일리어싱/구멍이 있습니까?). 정말로 문제가 있다면 safe-zones의fg로 전환하세요. - 히어로 오버플로우 — 큰 단어가 안전한 영역(레터박스 포함)을 벗어납니다. 강제 손질은 최종 수단입니다 — 대체 배치(
heroAnchor가 아닌heroBands)를 먼저 시도하고, 단어를 줄이거나(동의어) 더 작은 글꼴 맞춤을 시도하세요. - 레일/임베드 충돌 — 레일(앞)과 임베드(뒤)가 같은 공간을 차지합니다. safe-zones가 레일을 임베드 위에 쌓도록 해야 합니다.
֎ AI는 더 나은 가독성을 위해 레일을 무료로 움직일 수 있습니다— 하지만 절대 레일을 임베드와 겹치게 두지 마세요. - 히어로 LOCKUP 깨짐 — 사전 컨텍스트 / 히어로 / 사후 컨텍스트 스택이 끊어져 히어로가 분리되어 보입니다. LOCKUP은 단일 불가분 요소입니다 — 컴파일러가 블록 히어로를 생성한 경우 LOCKUP 표현식을 신뢰하세요. 수동 plan.json의 경우: LOCKUP의 세 부분을
top,mid,bottom으로 같은wrapper에 배치하고position: relative;+absolute를 사용하세요.