大家好,我是大白,致力于借助AI智能体实现AI高效变现的创业者和自媒体人。
今天手把手教大家用 Coze一键生成小说推文视频,全程保姆级拆解,感兴趣就往下看!!
需求分析
大家在刷短视频时,常见的小说类视频主要分为两种:一种是单纯播放小说内容,但配以与内容无关的切水果或手工制作等画面;另一种则是利用AI视频工具,根据小说内容自动生成相应的文案和画面。值得注意的是,这两类视频的观看量和点赞量都相当可观。
添加图片注释,不超过 140 字(可选)
但第一种视频文不对题,看着别扭;第二种更折磨——从搜集文案,到用即梦、可灵等AI工具反复抽卡、耗积分生成素材,再到导入剪映开始真正的噩梦:调音效、加转场、抠关键帧、做动画......动辄几小时甚至几天。没剪过的人,根本不懂这种痛。
现在有了Coze工作流,输入小说就能自动生成视频!是不是很神奇?来,一起拆解这个黑科技。
我们需要分为两大步骤:
1.梳理视频构成: 这一步是肉眼感知工作流的构成,看一下视频的总体构成有哪些要素。这个视频中包含了图片、文案、背景音乐、开场音乐、旁白音频、关键帧等。
2.捋顺工作流实现思路: 这一步需要理顺基于Coze实现工作流需要哪些步骤。
下面给出用户输入、工作流的实现步骤。
用户输入:
小说文案
工作流步骤:
-
定义用户输入
-
基于大模型根据用户输入的小说文案提炼2个字的标题
-
将小说文案分段,并去掉文本数据中无效段落
-
根据小说文案生成故事主角开场绘画提示词
-
生成主角首图并抠图
-
根据小说文案生成图片提示词
-
批量生成图片和字幕的语音
-
设置图片、音频、音乐的时间线
-
将这些素材添加到剪映草稿
-
设置标题、字幕,关键帧的时间线,并添加到剪映草稿
-
返回视频地址
工作流拆解
整体工作流如下图,还是按照惯例带大家拆解一下工作流的核心节点:
第一步,定义用户输入
开始节点定义一个参数input,表示小说文案,可以去免费的小说网站上复制一段。当然内容越长,段落越多,工作流里生成的图片也越多,相应扣的资源点也多。所以大家要注意不要复制太多内容,刚开始测试可以先复制20段左右先试试水。
输入的文案必须符合扣子平台内容发布标准和规范。否则会报文案内容不够安全的错误。
扣子平台内容发布标准和规范参考如下:
第二步,生成标题(大模型)
大模型节点根据输入的小说文案提炼出2个字的故事主题。
第三步,将小说文案分段,并去掉文本数据中无效段落
1)先将小说文案分段;在插件商店里找到下面这款第三方插件:【文本差分工具】, 选择Paragraph_splitting 方法,它将输入的文案拆分成一个个段落数组。
2)使用大模型节点去掉无效段落。上一步拆分后,会出现有些段落只有标点符号或换行符,这里使用大模型节点把它们去掉。
第四步,生成故事主角开场绘画提示词
只需在系统提示词里设定工作流:自动解析小说→智能识别主角→精准提取特征→AI风格调优。人工提炼故事主题都不一定这么专业——这就是提示词的神奇之处,让大模型的实力彻底释放!
第五步,生成主角首图并抠图
根据第四步的绘画提示词调用图像生成节点来生成主角首图,模型我们选择通用Pro,比例是4:3。
再调用cutcout 抠图节点把这个图片抠出来,它的输出是透明背景图。
第六步,生成图片提示词
大模型节点将输入的小说分段文本转化为丰富且具有描述性的图像生成提示词。并且指定必须努力在所生成的提示词之问实现叙事和视觉上的连贯性。
第七步,生成图片和文案配音(批处理)
在批处理体里,根据图片提示词使用图像生成节点生成图片。这里防止生成失败,加了一个双保险,如果第一次图像生成失败,就使用提示词优化节点优化提示词,再调用图像生成节点。
在图像生成的同时,使用语音合成插件根据音色和文本生成音频。这里音色选择活力小哥,语速1.5。
第八步,设置图片、音频、音乐的时间线
搞定图片和音频素材后,配上开场BGM和背景音乐,关键来了——要用代码节点精准对齐所有素材的时间轴!只需设置一次素材链接、总时长和起止时间,系统就能自动同步,效率直接拉满!
第九步,将这些素材添加到剪映草稿
创建剪映草稿;将第八步生成的带有时间线的音频,图片,主角首图,开场音效和背景音乐这些素材,添加到剪映草稿里。
在添加首图角色这里,x,y轴的缩放我们设置为2.
第十步,设置标题、字幕,关键帧的时间线,并添加到剪映草稿
1)使用代码节点设置关键帧时间线;这里设置了首图的3个关键帧,缩放比例从2倍->1.2倍->1倍。正文图片按照下标奇偶数,奇数索引的图片,缩放从1.0->1.5倍;偶数索引的图片,缩放从1.5->1.0倍。
正是这些关键帧,才能打造出"首图暴击+大小交替"的视觉暴风!配合旁白解说,让观众瞬间沉浸,代入感直接拉满!
2)设置标题、旁白解说的时间线
在第八步的代码节点里,计算了旁白和字幕的精准时间轴,在这一步需要给这些字幕设置这些时间轴,并同步到剪映草稿里。
重点来了!字幕设置要细抠:
✨ 字体样式(大小/类型/颜色)
✨ 排版参数(对齐方式/X-Y轴位置)
第十一步,返回视频地址
最后将视频合成的地址返回。视频类的工作流返回的都是【create draft】节点生成的id。
把生成后的草稿ID拷贝到下面的剪映小助手工具,点击创建剪映草稿,等待草稿下载完成。打开剪映工具,首页看到的一个黑乎乎的草稿就是新生成的视频啦~
总结
这就是整个工作流的全貌啦!虽然涉及几十个节点略显复杂,但动手能力强的读者完全可以按照这个思路深入研究~
想要获取完整工作流的提示词和代码吗?[点赞]+[收藏]+[关注]三连后扫我下方文档里的微信并留言“小说推文”,马上把全套学习资料打包发你!
大白智能体工作流资料分享 - 飞书云文档
本期干货就到这里啦!感谢宝子们的耐心阅读~ ❤️
如果你有智能体定制,合作,学习智能体,学习智能体变现等需求,随时找我聊 ✨