最近刷抖音,发现一个很值得关注的创作方向——AI古诗词。简单来说,就是将语文课本里那些“背诵全文”的文言文,变成一部活灵活现的古代“短剧”。
配上国风画面、朗诵音频和背景音乐,整体氛围立刻拉满。更令人惊叹的是,有人发布不到几十条作品,就涨粉30万,点赞突破150万。可见这类内容非常受用户欢迎。
拆解这类作品后,发现制作流程并不神秘。使用扣子(Coze)搭建一个工作流,只要输入古诗词名称和诗人名字,系统就能自动生成一条完整视频。比如我试了《出师表》,作者填“诸葛亮”,点击运行,稍等片刻,一条成品视频就完成了。(视频无法展示,放一张截图感受效果。)
1. 完整的工作流程
这个视频生成的工作流节点较多,我将其拆成四个模块:古诗词朗诵与字幕、古诗名和诗人配音字幕、古诗词视频分镜创作、剪映草稿生成。下面重点讲解每个部分的关键节点,其余节点熟悉扣子的朋友应该一看就懂。如果对扣子视频工作流还不熟悉,可以回顾我之前的《每日听懂一首歌》系列文章,里面做了非常详细的拆解。
2. 古诗词朗诵和字幕
这部分的核心任务很明确:把输入的古诗词名和诗人名交给大模型,让它找出原文并拆成小段落,然后分别生成配音,再将配音和文案段落转成剪映轨道上的时间线。
2.1. 开始
- gu_shi_name:古诗名称,必填
- api_token:插件认证(有条件获取),必填
- gu_shi_author:古诗作者,必填
- bgm:背景音乐,必填
2.2. 大模型-古诗词段落拆解
这个节点接收古诗名称和诗人名,通过扣子官方的大模型节点,对原文进行段落拆分。系统提示词篇幅较长,放在文末了。
2.3. 古诗朗读语音时间线
这里使用扣子第三方插件【视频剪辑工具箱】中的 multi_audio_timeline 工具,生成朗读语音在剪映上的时间线。
2.4. 古诗词文言文字幕时间线
该节点用于生成文言文段落在剪映轨道上的字幕时间线,同样调用【视频剪辑工具箱】中的 multi_caption_timeline 工具。
3. 古诗名和诗人配音和字幕
这部分用于生成古诗名称和诗人名字的配音与字幕。配音采用扣子官方自带的【语音合成】插件,剪映时间线生成工具与上面2.3和2.4相同。内容相对简单,不做展开。
4. 古诗词视频分镜创作
这部分用来制作视频分镜。首先,需要将零散的古诗文段落合并,确保每个分镜时长控制在10秒以内。然后,让大模型为每个分镜生成绘图提示词和视频提示词。流程是:先根据绘图提示词生成图片,再由图片转为视频。
生图模型使用扣子官方的Seedream4.0,视频生成模型使用doubao-seedance-pro。本打算做成有声视频,但doubao-seedance-1.5-pro总是超时,只能放弃。
4.1. 文言文字幕合并
通过大模型对散乱的字幕进行合并,使单个分镜时长控制在10秒以内。这里同样使用扣子官方的大模型节点,提示词放在文末。
4.2. 古诗词分镜绘图提示词&视频提示词
用于生成分镜的绘图提示词和视频提示词。受篇幅限制,系统提示词放在文末。
4.3. 古诗词分镜时间线
使用扣子第三方插件【视频剪辑工具箱】中的 multi_video_timeline 工具,将分镜视频添加到剪映轨道上。
5. 剪映草稿生成
这部分将前面生成的古诗词朗诵语音时间线、背景音乐时间线、字幕时间线等全部整合到剪映草稿中。使用的同样是【视频剪辑工具箱】插件,具体工具包括:create_draft(创建草稿)、add_audios(添加语音时间线)、add_captions(添加字幕时间线)、add_videos(添加视频时间线)、sa ve_draft(保存草稿,获取可下载地址)。
5.1. 结束
draft_url:剪映草稿下载地址。
6. 下载剪映草稿
工作流运行完毕后,会返回剪映草稿的下载地址。通过【视频剪辑小助手】可下载到本地。下载完成后,在剪映中就能看到完整的轨道时间线,直接导出即可。
7. 写到最后
这个工作流应该是第一次尝试生成“真人视频”的实践。个人感觉,使用doubao-seedance-pro生成的效果已经相当不错。如果换成Seedance2.0或Saro,画面效果可能会更惊艳,当然花费也会更高。
AI古诗词这个赛道确实很有潜力。它真正让课本中的古诗词“活”了过来,让孩子们能够更直观地感受诗中的情境与意境,从而更好地学习古诗。这才是核心价值所在。
