FunClip으로 긴 영상 또는 오디오를 검토된 클립과 자막으로 변환
에이전트가 미디어를 전사하고, 클립 타임스탬프를 제안하며, 자막 파일이 포함된 검토 가능한 비디오 세그먼트를 생성하는 반복 가능한 로컬 워크플로우가 필요할 때 FunClip을 사용하세요.
사전 요구 사항
Python 환경, FunClip 소스 체크아웃, FunASR 지원 모델, 로컬 또는 서버 Gradio 런타임, 그리고 전사 및 클리핑할 미디어 파일이 필요합니다.
설치
환경에 맞는 업스트림 설치 또는 설정 경로를 사용하세요:
- git clone https://github.com/alibaba-damo-academy/FunClip.git
- pip install -r ./requirements.txt
- brew install imagemagick
업스트림의 요구 사항 및 주의 사항:
- 2026/05/20 FunClip은 이제 Fun-ASR-Nano 및 SenseVoice 모델을 지원합니다. Fun-ASR-Nano는 31개 언어에 대해 더 높은 정확도를 제공합니다. SenseVoice는 감정 인식 및 오디오 이벤트 감지를 추가합니다. python funclip/launch.py -... 실행
- 2024/06/12 FunClip은 이제 영어 오디오 파일을 인식하고 클리핑할 수 있습니다. python funclip/launch.py -l en 을 실행하여 시도해보세요.
- FunClip은 곧 영어 사용자를 위해 Whisper 모델을 지원할 예정입니다(Whisper를 사용한 ASR은 타임스탬프와 함께 대량의 GPU 메모리가 필요하므로, FunASR에서 vanilla Paraformer에 대한 타임스탬프 예측을 지원하여 이를 해결합니다).
기본 사용법 또는 시작 노트:
-
| 사용법
-
🔥2024/05/13 FunClip v2.0.0은 이제 대규모 언어 모델을 사용한 스마트 클리핑을 지원하며, qwen 시리즈, GPT 시리즈 등의 모델을 통합하고 기본 프롬프트를 제공합니다. 또한 설정에 대한 팁을 탐색하고 공유할 수 있습니다...
-
cd FunClip
-
업스트림 문서에서 추출: https://raw.githubusercontent.com/modelscope/FunClip/HEAD/README.md