Skip to content

FunASR-powered video transcription, subtitle generation, and LLM-assisted clipping tool with a local Gradio UI.

update name

维石d1b6a1a4d39a
diff --git a/README.md b/README.md
index f944484..6dc44bb 100644
--- a/README.md
+++ b/README.md
@@ -1,23 +1,23 @@
-# FunClipper🎥
+# FunClip🎥
-FunClipper是一款自动化视频剪辑工具,通过调用阿里巴巴通义实验室开源的[FunASR](https://github.com/alibaba-damo-academy/FunASR) Paraformer系列模型进行视频的语音识别,随后用户可以自由选择识别结果中的片段,点击裁剪按钮即可获取对应片段的视频([快速体验](https://modelscope.cn/studios/damo/funasr_app_FunClipper/summary))。
+FunClip是一款自动化视频剪辑工具,通过调用阿里巴巴通义实验室开源的[FunASR](https://github.com/alibaba-damo-academy/FunASR) Paraformer系列模型进行视频的语音识别,随后用户可以自由选择识别结果中的片段,点击裁剪按钮即可获取对应片段的视频([快速体验](https://modelscope.cn/studios/damo/funasr_app_funclip/summary))。
-在上述基本功能的基础上,FunClipper有以下特色:
-- FunClipper集成了阿里巴巴开源的工业级模型[Paraformer-Large](https://modelscope.cn/models/iic/speech_paraformer-large_asr_nat-zh-cn-16k-common-vocab8404-pytorch/summary),是当前识别效果最优的开源中文ASR模型之一,Modelscope下载量1300w+次,并且能够一体化的准确预测时间戳。
-- FunClipper集成了[SeACo-Paraformer](https://modelscope.cn/models/iic/speech_seaco_paraformer_large_asr_nat-zh-cn-16k-common-vocab8404-pytorch/summary)的热词定制化功能,在ASR过程中可以指定一些实体词、人名等作为热词,提升识别效果。
-- FunClipper集成了[CAM++](https://modelscope.cn/models/iic/speech_campplus_sv_zh-cn_16k-common/summary)说话人识别模型,用户可以将自动识别出的说话人ID作为裁剪目标,将某一说话人的段落裁剪出来。
+在上述基本功能的基础上,FunClip有以下特色:
+- FunClip集成了阿里巴巴开源的工业级模型[Paraformer-Large](https://modelscope.cn/models/iic/speech_paraformer-large_asr_nat-zh-cn-16k-common-vocab8404-pytorch/summary),是当前识别效果最优的开源中文ASR模型之一,Modelscope下载量1300w+次,并且能够一体化的准确预测时间戳。
+- FunClip集成了[SeACo-Paraformer](https://modelscope.cn/models/iic/speech_seaco_paraformer_large_asr_nat-zh-cn-16k-common-vocab8404-pytorch/summary)的热词定制化功能,在ASR过程中可以指定一些实体词、人名等作为热词,提升识别效果。
+- FunClip集成了[CAM++](https://modelscope.cn/models/iic/speech_campplus_sv_zh-cn_16k-common/summary)说话人识别模型,用户可以将自动识别出的说话人ID作为裁剪目标,将某一说话人的段落裁剪出来。
- 通过Gradio交互实现上述功能,安装简单使用方便,并且可以在服务端搭建服务通过浏览器使用。
-- FunClipper支持多段自由剪辑,并且会自动返回全视频SRT字幕、目标段落SRT字幕,使用简单方便。
+- FunClip支持多段自由剪辑,并且会自动返回全视频SRT字幕、目标段落SRT字幕,使用简单方便。
欢迎体验使用,欢迎提出关于字幕生成或语音识别的需求与宝贵建议~
## 近期更新🚀
- 2024/03/06 命令行调用方式更新与问题修复,相关功能可以正常使用。
-- 2024/02/28 FunClipper升级到FunASR1.0模型调用方式,通过FunASR开源的SeACo-Paraformer模型在视频剪辑中进一步支持热词定制化功能。
-- 2024/02/28 原FunASR-APP/ClipVideo更名为FunClipper。
+- 2024/02/28 FunClip升级到FunASR1.0模型调用方式,通过FunASR开源的SeACo-Paraformer模型在视频剪辑中进一步支持热词定制化功能。
+- 2024/02/28 原FunASR-APP/ClipVideo更名为FunClip。
-## 使用FunClipper进行视频剪辑✂️
+## 使用FunClip进行视频剪辑✂️
### 安装
```shell
@@ -26,7 +26,7 @@ pip install -U funasr
# 可以通过源码安装funasr
git clone https://github.com/alibaba-damo-academy/FunASR.git
cd FunASR; pip install -e ./
-# 安装FunClipper的Python依赖(必须)
+# 安装FunClip的Python依赖(必须)
pip install -r ./requirments.txt
# 根据你的环境(CUDA,Python版本等)安装torch和torchaudio
pip install torch torchaudio
@@ -47,15 +47,15 @@ sed -i 's/none/read,write/g' /usr/local/Cellar/imagemagick/7.1.1-8_1/etc/ImageMa
并且下载你需要的字体文件,这里我们提供一个默认的黑体字体文件
```shell
-wget https://isv-data.oss-cn-hangzhou.aliyuncs.com/ics/MaaS/FunClipper/STHeitiMedium.ttc -O font/STHeitiMedium.ttc
+wget https://isv-data.oss-cn-hangzhou.aliyuncs.com/ics/MaaS/funclip/STHeitiMedium.ttc -O font/STHeitiMedium.ttc
```
-### 使用FunClipper
+### 使用FunClip
#### A.在本地启动Gradio服务
```shell
-python FunClipper/launch.py
+python funclip/launch.py
```
随后在浏览器中访问```localhost:7860```即可看到如下图所示的界面,按如下步骤即可进行视频剪辑
1. 上传你的视频(或使用下方的视频用例)
@@ -67,15 +67,15 @@ python FunClipper/launch.py
<img src="docs/images/demo.png"/>
-#### B.通过命令行调用使用FunClipper的相关功能(更新中)
+#### B.通过命令行调用使用FunClip的相关功能(更新中)
```shell
# 步骤一:识别
-python funclipper/videoclipper.py --stage 1 \
+python funclip/videoclipper.py --stage 1 \
--file examples/2022云栖大会_片段.mp4 \
--output_dir ./output
# ./output中生成了识别结果与srt字幕等
# 步骤二:裁剪
-python funclipper/videoclipper.py --stage 2 \
+python funclip/videoclipper.py --stage 2 \
--file examples/2022云栖大会_片段.mp4 \
--output_dir ./output \
--dest_text '我们把它跟乡村振兴去结合起来,利用我们的设计的能力' \
@@ -84,8 +84,8 @@ python funclipper/videoclipper.py --stage 2 \
--output_file './output/res.mp4'
```
-#### C.通过Modelscope创空间体验FunClipper
-[FunClipper创空间](https://modelscope.cn/studios/damo/funasr_app_FunClipper/summary)
+#### C.通过Modelscope创空间体验funclip
+[funclip创空间](https://modelscope.cn/studios/damo/funasr_app_funclip/summary)
### 通过FunASR了解语音识别相关技术
diff --git a/funclipper/__init__.py b/funclip/__init__.py
similarity index 100%
rename from funclipper/__init__.py
rename to funclip/__init__.py
diff --git a/funclipper/argparse_tools.py b/funclip/argparse_tools.py
similarity index 100%
rename from funclipper/argparse_tools.py
rename to funclip/argparse_tools.py
diff --git a/funclipper/imagemagick_test.py b/funclip/imagemagick_test.py
similarity index 100%
rename from funclipper/imagemagick_test.py
rename to funclip/imagemagick_test.py
diff --git a/funclipper/launch.py b/funclip/launch.py
similarity index 100%
rename from funclipper/launch.py
rename to funclip/launch.py
diff --git a/funclipper/subtitle_utils.py b/funclip/subtitle_utils.py
similarity index 100%
rename from funclipper/subtitle_utils.py
rename to funclip/subtitle_utils.py
diff --git a/funclipper/test.sh b/funclip/test.sh
similarity index 100%
rename from funclipper/test.sh
rename to funclip/test.sh
diff --git a/funclipper/trans_utils.py b/funclip/trans_utils.py
similarity index 100%
rename from funclipper/trans_utils.py
rename to funclip/trans_utils.py
diff --git a/funclipper/videoclipper.py b/funclip/videoclipper.py
similarity index 100%
rename from funclipper/videoclipper.py
rename to funclip/videoclipper.py
diff --git a/requirments.txt b/requirments.txt
index a344115..a9bf0e0 100644
--- a/requirments.txt
+++ b/requirments.txt
@@ -1,6 +1,6 @@
librosa
soundfile
-funasr
+funasr>=1.0.19
moviepy
numpy
gradio