AI短剧自动化生产与口型同步工作流产品系统Vibe Coding

面向短剧制作、品牌剧情广告和短视频内容团队，解决传统制作中剧本拆分、分镜规划、素材生成、字幕制作、口型同步和成片合成环节分散、重复操作多的问题。项目将从文本脚本到竖屏成片的流程串联起来，适合需要快速验证剧情创意、批量制作系列内容及降低前期拍摄成本的业务场景。

项目包含剧本结构化、角色与场景设定、分镜及提示词生成、镜头素材管理、对白音频处理、字幕时间轴生成、人物口型同步、视频裁剪拼接、音画对齐和质量检查等模块。支持按镜头配置视频与音频素材，批量执行推理任务并输出中间结果；通过自动化脚本统一分辨率、帧率和音频参数，最终生成带字幕的竖屏短剧成片，同时保留剧本、分镜JSON、字幕SRT及可复用配置文件。

我负责整体流程设计、脚本开发、模型部署调试、素材预处理、口型同步和最终成片验收。技术上以Python组织批处理任务，使用PyTorch与MuseTalk完成音频驱动的人像口型同步，结合FFmpeg进行音视频切片、转码、拼接和字幕合成，并通过OpenCV辅助抽帧检查。实现难点包括不同素材帧率与音轨长度不一致、长视频显存占用、人物说话片段定位以及推理后画面与原素材的无缝拼接；项目通过分段推理、配置化任务和逐镜头质检提升稳定性与复用效率。