这是一个非常前沿且实操性很强的问题,短剧（特别是小程序短剧或竖屏短剧）追求的是高效率和强情绪，而AI目前最擅长的就是批量生成和创意发散。
要对接AI进行短剧分镜制作,核心流程需要从“纯人工”转向“人机协作生产管线”，以下是具体的对接流程，分为5个阶段：
第一阶段：剧本输入与AI结构化拆解
这个阶段的目标是让AI理解剧本,并生成分镜所需的基础元素。
- 剧本预处理：
- 将剧本（Word/TXT）喂给AI（如GPT-4/Claude/Kimi）。
- 关键指令：要求AI识别并标注出以下标签：
[场景切换]、[高潮情绪点]、[关键台词]、[动作密度]。
- 智能分场与打点：
- AI根据剧本的情绪起伏,自动划分场次（每场约30-60秒，对应短剧的卡点节奏）。
- 生成物：一个结构化的表格，包含：场次号、场景描述、核心情绪（喜/怒/虐/爽）、人物状态。
第二阶段：AI辅助分镜拆解（文本分镜）
这是最核心的环节,AI将“文本”转化为“镜头语言”。
- 生成Shot List（镜头列表）：
- 针对每一场戏,要求AI生成多个镜头（Shot）。
- Prompt示例：“请为以下短剧片段生成分镜脚本，要求：竖屏构图，每5秒一个镜头切换，包含：镜头景别（近景/特写/中景）、运镜方式（推/拉/摇/固定）、构图描述（主角在左侧45度角）、核心视觉元素。”
- 关键帧提示词工程：
- 分镜描述 -> 文生图提示词。
- 使用AI（如Midjourney/DALL-E 3）辅助生成镜头参考图。
- 技巧：在提示词中加入短剧专用词，如
cinematic lighting,vertical screen composition,dramatic angle,web-series style。
第三阶段：视觉化生成与“AI演员”选角
这一步是从抽象到具体的视觉落地。
- 角色一致性管理：
- 利用AI的根据输入图片生成能力（如Midjourney的Cref功能或Stable Diffusion的IP-Adapter）。
- 先由AI生成“角色定妆照”（男主/女主/反派），并将面部特征作为后续所有分镜的固定参数。
- 批量生成分镜图：
- 将第二阶段的“镜头描述”导入AI绘画工具，结合角色ID，批量生成该场的所有关键帧。
- 效率点：使用工作流（ComfyUI）实现自动化：输入文本→生成构图→换脸→输出。
- 动态预演（可选）：
- 将生成的关键帧序列导入AI视频工具（如Runway Gen-2/3， Pika， Sora， 可灵AI）。
- 输入AI生成的内容,直接生成“动态分镜预览”，比起真人拍摄，这可以极低成本检验节奏。
第四阶段：AI辅助摄制与后期
短剧创作的特殊性在于“拍摄”环节，AI分镜在这里起到导航和替代作用。
- 作为拍摄参考：
导演和摄影师拿着AI生成的“分镜图”和“动态预览”上阵，这极大地降低了沟通成本。
- AI生成实拍素材（虚拟拍摄）：
- 对于外景、特效、危险镜头、或无法找到的演员，可以直接使用AI视频生成（如可灵AI， Sora）生成 纯AI短剧片段。
- 分镜在此成为直接的生产指令，跳过实拍。
- AI后期剪辑：
将AI分镜的时间轴导入剪辑软件,AI可以自动为实拍素材进行粗剪，匹配分镜的节奏。
第五阶段：反馈循环与迭代优化
这是AI对传统流程的颠覆性提升。
- A/B测试：
- 生成两种不同分镜风格（A风格-慢节奏暧昧；B风格-快节奏强冲突）。
- 用AI分析这两种分镜下的“情绪曲线”或“爽点密度”，选最优。
- 自动化修正：
如果观众反馈某一段“拖沓”，可以直接调整AI分镜中的“镜头时长”或“景别”，重新生成预览。
当前主流的工具链对接方案
要将上述流程落地,推荐以下组合：
- 剧本拆解：ChatGPT-4 / Claude（用来理解隐喻，输出结构化的分镜表）。
- 静态分镜：Midjourney + 角色一致性插件（视觉美学极致） 或 Stable Diffusion + ComfyUI（可控性极强，适合工业流程）。
- 动态分镜：Runway Gen-3 或 可灵AI（动态生成，生成能直接用的素材）。
- 后期与剪辑：Descript（AI自动剪辑） 或 DaVinci Resolve + AI插件。
关键注意事项
- 竖屏思维：AI默认生成横屏图，必须在所有Prompt中强制加入
--ar 9:16（竖屏比例）或vertical composition。 - 情绪连续：AI生成的单张图很惊艳，但连在一起可能不连贯，需要靠提示词中的连贯性描述（保持角色服装、光线方向一致）。
- 人机分工：目前AI最适合做降本增效（批量生成背景、道具、无面配角），而主角的高潮情绪特写建议保留为人工精修或高精度AI LoRA训练。
对接SOP
人工定调 -> AI拆解 -> AI生成视觉 -> 人工审核与微调 -> AI输出分镜包 -> 投入拍摄/AI生成。
未来趋势：目前最前沿的团队，已经开始尝试直接输入剧本，通过AI生成完整的分镜视频（动态故事板），以此替代传统的纯图分镜，这代表着短剧的工业化进程正在加速。