숏 비디오 워크스페이스은(는) 무엇을 하나요?
이 스킬은 독립적으로 설치된 short-video-studio 플러그인에 속합니다. 글로벌 복사본을 설치하거나 iPolloWork 소스 저장소를 수정하지 마십시오.
대화 및 워크스페이스
사용자는 기존 왼쪽 대화창에서 대화합니다. 오른쪽 워크스페이스는 두 번째 채팅이 아닌 창의적인 캔버스입니다. Work의 기존 플러그인 진입점을 통해 플러그인의 studio 워크스페이스 앱을 엽니다. 이미 열려 있다면 ipollowork_workspace_app_list_tools를 사용하여 도구를 찾고 ipollowork_workspace_app_call_tool로 호출하십시오. 브라우저 URL을 추측하거나 다른 편집기 서버를 시작하지 마십시오.
project_read를 호출하십시오. 프로젝트에는nodes,edges,script,shots,roles,assets,tracks,jobs,exports및 현재revision이 있습니다.- 일관된 이야기를 제안하고
project_update로 동일한 문서를 업데이트하십시오. 관련 없는 작업과 현재 리비전을 유지하십시오. 리비전 충돌이 반환되면 다시 읽고 조정하십시오. 맹목적으로 덮어쓰지 마십시오. - 노드에는
id,kind(text,image,video,audio,script,storyboard),title,prompt,x,y, 선택적assetId및settings가 있습니다. ID는 문자로 시작하고 ASCII 문자, 숫자,_또는-만 포함합니다. 에지는{id, from, to}입니다. 캔버스를 구성하지만 모델 참조는 아닙니다. - 샷은 재생 순서대로
{id, title, prompt, narration, duration, assetId?}입니다. 지속 시간은 초 단위입니다. 역할은{id, name, description, assetId?}입니다. 캐릭터 일관성은 프롬프트/참조 워크플로우이지 보장이 아닙니다.
실제 생성
모델을 선택하기 전에 capabilities를 호출하십시오. Work에서 사용 가능/구성된 모델과 반환된 매개변수 선택만 사용하십시오. 플러그인은 LibTV에 연결하거나 다른 API 키를 저장하지 않습니다.
이미지 노드 settings: model, size, quality; 선택적 referenceId(이미지 편집용), maskDataUrl(명시적으로 제공된 투명 PNG 마스크용). 비디오 노드 settings: model, operation, resolution, duration (문자열), ratio; referenceId(첫 번째 프레임), lastFrameId(마지막 프레임) 또는 referenceIds(멀티모달 참조). 첫 번째 프레임, 편집 및 확장 모드는 adaptive 비율을 사용합니다. 편집은 duration -1을 사용합니다. style 및 camera는 프롬프트 의도이지 기본 결정론적 제어가 아닙니다.
오디오 노드는 Work의 구성된 CosyVoice 채널을 통해 음성을 합성하며, prompt를 나레이션 텍스트로 사용하고 선택적 settings.voice를 사용합니다. 서비스는 저장된 MP3 지속 시간을 측정합니다. 음성 잘림 없이 별도의 오디오 트랙에 배치하십시오. 이것은 음악 생성 모델이 아닙니다.
사용자가 생성을 요청할 때만 generate를 호출하십시오. 구성된 공급자에 요금이 부과될 수 있습니다. 새로운 생성에는 신선한 UUID requestId를 전달하십시오. 전송 결과가 불확실한 경우 동일한 요청 ID를 재사용하십시오. generation_status를 쿼리하십시오. 불확실한 작업을 자동으로 다시 제출하지 마십시오. 지원되지 않는 모델, 음악 생성, 독점 LibTV 서비스 및 사용할 수 없는 권한은 시뮬레이션하지 말고 설명해야 합니다.
사용자가 선택한 로컬 미디어는 워크스페이스 상대 path와 함께 import_asset을 통해 가져옵니다. 에셋은 프로젝트 소유 복사본이 됩니다. Work 검사에서 지속 시간을 사용할 수 없는 미디어의 경우 metadata.durationSeconds를 제공하십시오. 지속 시간을 임의로 만들거나 최종 트랙에서 원격 만료 URL을 사용하지 마십시오. 생성/가져온 assets, jobs 및 exports는 서비스에 의해 유지 관리됩니다. project_update가 이를 생성할 수 없습니다.
편집 가능한 멀티트랙 핸드오프
이미지/비디오 에셋을 샷에 할당한 다음 arrange_shots를 호출하십시오. 이렇게 하면 러프 컷 트랙이 대체되므로 기존 수동 트랙 편집을 폐기하기 전에 물어보십시오. 원본 사운드는 비디오에 혼합되지 않고 별도의 오디오 트랙이 됩니다. 음악/음성/SFX는 별도의 오디오 트랙으로 추가하십시오. 자막은 편집 가능한 텍스트로 유지됩니다.
트랙에는 {id, label, kind, clips}가 포함됩니다. 클립 시작/지속 시간은 프로젝트의 합리적인 fps에서 정수 startFrame/durationFrames를 사용합니다. 미디어 클립은 source: assets/<등록된 파일명>, sourceDurationSeconds, sourceStartSeconds, playbackRate, volume을 사용합니다. 동일 트랙 오버랩 및 소스 오버런은 거부됩니다. 편집 가능한 프로젝트로 평면화된 MP4를 절대 핸드오프하지 마십시오.
handoff를 호출하십시오. 결과 absolutePath 또는 워크스페이스 상대 path를 왼쪽 대화창의 클릭 가능한 로컬 파일 링크로 반환하고 사용자에게 Work의 Video Studio에서 열도록 알리십시오. 현재 호스트에는 기본 편집기로 직접 전환하는 일반 플러그인 API가 없습니다. 자동으로 전환되었다고 주장하지 마십시오. 핸드오프되면 기본 HTML 및 에셋이 편집의 소스 진실이 됩니다. 오래된 캔버스 문서에서 덮어쓰지 마십시오. 변경된 핸드오프는 새 엔지니어링 파일을 생성합니다. 변경되지 않은 반복 핸드오프는 기존 파일을 재사용합니다.
프로젝트는 선택한 워크스페이스의 short-video/<project-id>/ 아래에 있습니다. 기본 핸드오프는 video/<id>/ 아래에 있습니다. 이러한 사용자 생성 파일은 플러그인 제거 후에도 유지됩니다. 패키지, 스킬 및 임시 업로드 데이터는 호스트의 플러그인 수명 주기에 의해 제거됩니다.