面向短视频内容生产场景的 AI 视频自动化平台,支持 CLI 与 HTTP API 两种调用方式。系统接入火山引擎 ASR 与大模型能力,打通语音转写、字幕校正、智能分句、双语翻译、画中画匹配、模板化渲染、音频混音到成片上传回调的完整链路,提升短视频出片效率。
点击空白处退出提示
面向短视频内容生产场景的 AI 视频自动化平台,支持 CLI 与 HTTP API 两种调用方式。系统接入火山引擎 ASR 与大模型能力,打通语音转写、字幕校正、智能分句、双语翻译、画中画匹配、模板化渲染、音频混音到成片上传回调的完整链路,提升短视频出片效率。
面向短视频内容生产场景的 AI 视频自动化平台,支持 CLI 与 HTTP API 两种调用方式。系统接入火山引擎 ASR 与大模型能力,打通语音转写、字幕校正、智能分句、双语翻译、画中画匹配、模板化渲染、音频混音到成片上传回调的完整链路,提升短视频出片效率。
1. 设计 CLI + HTTP API + BullMQ Worker 架构,完成任务创建、排队调度、进度追踪、日志记录、失败重试与回调通知,支撑批量视频异步生产。
2. 接入火山引擎 ASR 完成音视频转写,结合 LLM 实现字幕错别字校正、AI 分句、双语翻译、标题关键词提取与高亮策略。
3. 基于语义分析实现画中画素材智能匹配,将字幕片段与素材库自动关联,减少人工检索与剪辑编排成本。
4. 基于 Remotion + React 搭建模板化渲染引擎,支持字幕模板、字幕动效、背景特效、标题样式与画中画布局的快速编排。
5. 使用 FFmpeg 实现原声、背景音乐、音效的自动混音与音量归一化处理,并完成字幕烧录、片段拼接与最终视频导出。
6. 集成 Aliyun OSS 完成成片上传与结果回传,构建从任务接入到成片交付的自动化闭环,降低人工后期制作成本。



评论