#8549 使用LLM重新断句替代LLM纠错是否需要开启

120.217**0 Posted at: 2 hours ago

使用LLM重新断句替代LLM纠错是否需要开启

7 Replies

#1 DeepSeek reply at 2 hours ago

非必须,它是可选的增强项,需你自行决定是否勾选。

说明:

  1. 只勾选 LLM纠错(默认方式):仅用 AI 修正错别字、恢复标点,字幕条数和时间轴基本保持不变,较安全。提示词位于 videotrans/prompts/resegment/llm.txt。
  2. 勾选 使用LLM重新断句替代LLM纠错:改用 AI 重新断句,字幕条数和时间轴会变化,句子更通顺,但与原始字幕无法一一对应。提示词位于 videotrans/prompts/resegment/llm_re.txt。

开启前需注意:

  • 所用 AI 渠道和模型必须支持长上下文和长输出(建议在线旗舰模型),并在 高级选项--语音识别参数--LLM纠错所用AI渠道 中选定。
  • 开启后请勿嵌入双字幕(硬字幕双语/软字幕双语),因重新断句后字幕条数与原文不匹配,会出错。
  • 若你需要与原字幕行号严格对齐(例如导入外部字幕、二次校对),不要开启。

如果你不确定选哪个:普通视频翻译保持默认只勾 LLM纠错 即可;若觉得断句碎、语义不连贯,再开启重新断句。

请查阅相关文档:

#2 120.217**0 reply at 2 hours ago

上下文感知需要开启吗

#3 DeepSeek reply at 2 hours ago

非必须开启,属可选项,取决于你的显存和视频情况。

说明:启用上下文感知 位于 菜单 → 工具/选项 → 高级选项 → 语音识别参数,作用于 faster-whisper/openai-whisper 等 whisper 系识别。

开启的利弊:

  • 好处:模型可参考前后文,识别出的句子连贯性和准确度通常更好。
  • 代价:占用更多 GPU 显存,且更容易出现重复输出、幻觉(如凭空补出原文没有的句子、反复重复同一句)。
  • 关闭:更省显存、更稳定,但个别长难句的准确度可能略低。

建议:

  1. 显存充足(large-v3 建议 8GB+)、视频语音清晰、无明显背景噪声时,可尝试开启,看结果是否更好。
  2. 显存紧张、出现 CUDA out of memory/Unable to allocate,或识别结果出现大段重复、凭空多出的文字时,请关闭。
  3. 使用 VAD 预切片识别的渠道(如部分非 whisper 渠道),上下文感知意义不大,可保持关闭。

请查阅相关文档:

#4 120.217**0 reply at 2 hours ago

静音移除力度

#5 DeepSeek reply at 2 hours ago

这是字幕配音阶段的对齐辅助参数,本身不产生效果,必须配合“移除静音缓冲”选项才生效。

一、位置与作用
进入 菜单 → 工具/选项 → 高级选项 → 字幕配音,找到 静音移除力度。它控制 TTS 生成的配音中,静音片段被删除的多少,目的是缩短配音时长,让字幕、声音、画面更对齐。

二、三档取值

  • low:移除力度最小,保留较多静音,配音更长、更接近原始 TTS 输出,听感更自然,但更容易超长。
  • default(默认):中等力度,建议先用这个。
  • max:移除力度最大,移除更多静音,配音更紧凑、更短,利于对齐,但可能听起来停顿生硬、句子粘连。

三、前提条件
只有当你勾选了以下任一选项时,该参数才有意义:

  • 移除每条字幕配音开头结尾静音缓冲
  • 移除每条字幕配音全部静音缓冲

四、选择建议

  • 配音普遍偏长、音画不同步 → 先把 移除每条字幕配音开头结尾静音缓冲 勾上,力度保持 default;仍不够再改 max。
  • 配音听起来断句急促、句子粘一起、语气不自然 → 改回 low 或 default。
  • 不建议在未勾选移除静音选项时单独调它,无效果。

请查阅相关文档:

#6 120.217**0 reply at 2 hours ago

whisper提示词写什么

#7 DeepSeek reply at 2 hours ago

该提示词用于引导 whisper 系模型(faster-whisper / openai-whisper / whisper.cpp)在识别时偏向某些词汇和书写形式。位置:菜单 → 工具/选项 → 高级选项 → 【whisper 提示词】区域,按语种分别设置,需与你所选“发音语言”对应的那一条一致。

一、写什么内容

  • 视频中反复出现、容易被识别错的人名、地名、公司名、品牌、缩写、专业术语,例如:李明, 张教授, pyVideoTrans, CUDA, cuDNN, FFmpeg
  • 你希望统一书写形式的词,例如:AI 不要识别成 A I
  • 数字、单位、货币等习惯写法,例如:10GB, 3.5%, 人民币

二、不要写什么

  • 不要写“请准确识别”“你是转录助手”之类的指令性句子。该字段按提示文本处理,不按指令执行。
  • 不要粘贴大段无关文章或字幕原文。过长内容会削弱引导作用,甚至干扰识别。
  • 不要混入与发音语言无关的语种;中文视频就写中文术语,英文视频写英文术语。

三、填写建议

  • 只填关键、高频的少量词条,十来个即可,用逗号或空格分隔。
  • 先在识别结果中查找错得最多的词,再写进提示词,逐次补充,不要一次写满。
  • 与【语音识别参数】中的 热词 区分:热词以英文逗号分隔多个,两者可以搭配使用,都用于偏置识别结果。

四、注意

  • 该提示词仅对 whisper 系渠道有效;使用 Qwen-ASR、FunASR、云 API 等渠道时基本无意义,请改用对应渠道自身的术语/热词机制,或使用 LLM纠错。
  • 修改后建议先处理一个短视频验证效果。
  • 具体生效方式和字段保存位置以你当前版本界面为准;知识库对该参数只有“每个语种均可设置对应提示词”的说明。

请查阅相关文档:

Thinking...
Post Your Reply
If you have more than 50 messages, you will no longer receive an automatic reply. Please ask a new question!
Open source and free maintenance is not easy. If this project is helpful to you, please consider making a small donation to help the project continue to maintain and update.

Dondate via ko-fi.com

Related resource