扣子(Coze)实战:“每天听懂一首歌”工作流拆解——歌曲解说

134 阅读10分钟

大家好,我是吾鳴。专注于分享提升工作与生活效率的工具,无偿分享AI领域相关的精选报告,持续关注AI的前沿动向。

这是一篇有上下文的文章,前面已经发了两篇文章,分别讲解了“每天听懂一首歌”内容形式的爆款逻辑,以及视频开头的工作流——《 扣子(Coze)实战:“每天听懂一首歌”,这个爆火的赛道,我用扣子复刻了》、《扣子(Coze)实战:“每天听懂一首歌”工作流拆解——视频开头》。

在第一篇文章中演示工作流的时候,因为工作流的复杂性,所以把整个工作流拆解成了3个子工作流,分别对应视频的开头、正文解说和结尾,文章中也说到会再出三篇文章讲解这3个子工作流的实现。

本文是第三篇文章,专门讲解歌曲正文解说部分的内容,本文讲解的工作流输出歌曲的解说这一部分的内容,工作流产出的视频效果如下(视频上传不了,我截张图)。

下面开始这一个工作流的讲解。

1. 完整的工作流程

1、歌曲解说:这一流程会先让大模型对输入的歌曲名进行歌曲解说,生成文案,然后对生成的文案进行配音,最后把配音和文案生成剪映草稿的语音和字幕。

2、歌曲视频:这部分内容会根据生成的歌曲解说拆分视频的分镜,并且生成分镜的绘图提示词和视频提示词,并且使用图生视频大模型生成分镜视频。

3、背景音乐:这部分流程是把背景音乐转成剪映草稿音频轨道上的时间线。

4、剪映草稿:这一部分的流程是把前面生成好的解说语音时间线、字幕时间线、歌曲视频时间线、背景音乐时间线添加到剪映草稿中。

2. 歌曲解说

2.1. 开始

  • api_token:插件认证,必填,可后台回复【芝麻开门】联系获取(有条件)
  • bgm_music_file:歌曲音乐文件,必填
  • music_name:歌曲名称,必填
  • reference_image_nv:歌曲视频女主参考图,必填
  • reference_image_nan:歌曲视频男主参考图,必填
  • draft_id:剪映草稿ID,必填
  • start_us:剪映轨道开始时间,必填

2.2. 歌曲解说

这个节点用来生成歌曲解说文案,使用到了扣子官方的大模型节点。

  • 系统提示词,这是个伪提示词,可参考文章《 扣子(Coze)实战:这个“小而美”的宝宝小名赛道,一键直达草稿箱》到豆包进行反推。
你要变身亲切口语化的音乐科普博主,核心是帮听众听懂歌曲灵魂,按要求创作音乐科普文案。
用户给歌曲名后,先确认其核心情感、创作背景、歌词深层含义,再按 “开篇 + 主体分析 + 结尾金句” 结构创作,开篇点明核心情感与主题,主体用 “你” 代入日常场景、解析关键歌词,结尾用简短金句升华。
语言口语化,每句≤15 字,总字数 200-300 字,段落换行,适配不同歌曲类型,信息务必准确,无法确认需明确告知。仅做音乐科普,输出无标点,不含搜索相关语句,严格遵循格式要求。

2.3. 解说配音

这个节点循环将文案转成语音,使用到了扣子官方的循环节点。

2.4. 解说文案配音

这个节点用来将文案转成语音,使用到了扣子官方的插件【语音合成】的【speech_synthesis】工具。

2.5. 解说配音时长转换

这个节点用来循环把配音时长由秒转成微秒,因为后面的视频剪辑工具箱使用到的时间单位是微秒,这个节点使用到了扣子官方的循环节点。

2.6. 秒转微秒

这个节点是把秒转成微秒,使用到了扣子三方插件【数字工具合集】的【sec_2_us】工具。

2.7. 歌曲解说语音时间线

这个节点的作用是把歌曲解说语音转成剪映音频轨道时间线,使用到了扣子三方插件【视频剪辑工具箱】的【multi_audio_timeline】工具。

2.8. 歌曲解说字幕时间线

这个节点的作用是把歌曲解说文案转成剪映字幕时间线,使用到了扣子三方插件【视频剪辑工具箱】的【multi_caption_timeline】。

3. 歌曲视频

3.1. 正文解说字幕合并

这个节点是为了把歌曲解说文案时间线做合并,因为歌曲解说的时间线比较碎,需要把解说整合成语义连贯的文案,便于后面生成视频的分镜,使用到了扣子官方的大模型节点。

  • 系统提示词,这是个伪提示词,可以按照上方方法反推。
你要变身专业字幕合并专家,核心是把用户给的散乱简短字幕文案合并成情绪连贯、逻辑通顺的段落,全程保留所有原信息不新增内容,每段时长≤5 秒(微秒计),最终输出对应合并字幕列表和时间线列表。
先接收用户的字幕文案列表和时间线列表(微秒元组),再识别情绪、场景、逻辑边界,仅在无边界的相邻文案间合并,按原顺序拼接文字。合并后若时长超 5 秒,在不破坏连贯性的临界点拆分,每段时间线取段内首个开始时间和最后一个结束时间,严格校验时长。
输出需清晰区分两个列表,不删减替换原文字、不合并强制边界,仅处理字幕合并相关任务,拒绝无关请求。

3.2. 正文解说分镜图片提示词

这个节点用来生成分镜图片的绘图提示词,使用到了扣子官方的大模型节点。

  • 系统提示词,是个伪提示词,可以到豆包反推
你要变身精准的新海诚风格画面提示词生成助手,核心是把 “每天听懂一首歌” 相关文案转化为新海诚风格可视化画面描述词,还原梦幻治愈感。
先解析文案情感和场景核心,按文案数量生成一一对应的连贯分镜,提取人物动作、音乐道具、新海诚风格场景等核心元素。
再按固定公式生成人物物理描述,包含年龄、身材、分层服装、表情姿态,强制贴合歌曲情感。
接着构建匹配音乐情绪的场景,用新海诚标志性的侧逆光、漫反射等光线和匹配情感的低饱和主色调渲染氛围。
最终按文案和画面描述词的表格格式输出,严格遵循新海诚风格,保持角色物理描述一致,不增删分镜,不用命名指代人物,涉及听歌必加关联音乐道具。

3.3. 正文解说分镜图片生成

这个节点使用了扣子官方的循环节点,用来循环生成分镜图片。

3.4. 图像生成

这个节点用来绘制分镜图片,使用到了扣子官方的图像生成节点。

3.5. 正文解说分镜视频提示词

这个节点用来生成分镜视频生成提示词,使用到了扣子官方的大模型节点。

  • 系统提示词,这是个伪提示词,可到豆包反推
你要变身新海诚风格视频创作助手,核心是将歌曲文案和分镜设计转化为 5 秒左右的新海诚风格视频,精准还原其视觉美学与细腻叙事氛围。
先逐一对分镜绘图提示词和文案提取核心要素,提示词抓 1-2 个关键视觉、镜头、人物动作,文案定位单一核心情感节点,简化隐喻为具象符号。
再将核心要素转化为新海诚风格,单一场景 + 1 个动态元素,1 种核心光效主导且聚焦人物局部,用固定 / 轻微推拉镜头,1 个情感符号 + 1 个人物表情瞬间,适配 5 秒节奏。
最后按对应数量输出结构化视频提示词,每个包含分镜核心对应、新海诚视觉元素、情感氛围补全,严格控制 5 秒时长,复杂内容需简化为单元素场景,仅输出提示词列表无冗余信息。

3.6. 正文解说视频生成

这个节点使用到扣子官方的循环节点,用来循环生成分镜视频。

3.7. 视频生成

这个节点使用到了扣子官方的视频生成节点,用来生成分镜视频。

3.8. 视频链接获取

这个节点用来把生成的视频转成一个url地址,使用到了扣子官方的文本处理节点。

3.9. 正文解说视频时间线

这个节点用来把视频转成剪映视频轨道上的时间线,使用到了扣子三方插件【视频剪辑工具箱】的【multi_video_timeline】工具。

4. 背景音乐

4.1. 音乐文件处理

这个节点使用到了官方的文本处理节点,用来将音乐文件转成url格式。

4.2. 背景音乐时间线

这个节点是把背景音乐转成剪映音频轨道上的时间线,使用到了三方插件【视频剪辑工具箱】的【single_audio_timeline】。

5. 剪映草稿

5.1. 添加正文解说音频

这个节点使用到了扣子三方插件【视频剪辑工具箱】的【add_audios】工具,作用是把生成好的正文解说音频时间添加到剪映的草稿中,需要注意这里是接着“视频开头”这个草稿继续添加,不需要再创建新的剪映草稿。

5.2. 添加背景音乐音频

这个节点用来添加生成好的背景音乐时间线到剪映草稿中,使用到了扣子三方插件【视频剪辑工具箱】的【add_audios】工具。

5.3. 添加正文解说字幕

这个节点用来将生成好的正文解说字幕添加到剪映草稿中,使用到了扣子三方插件【视频剪辑工具箱】的【add_captions】工具。

5.4. 添加正文解说视频

这个节点的作用是把正文解说视频时间线添加到剪映草稿中,使用到了扣子三方插件【视频剪辑工具箱】的【add_videos】工具。

5.5. 保存草稿

这个节点的作用是把之前添加到剪映草稿中的时间线给持久化下来,使用到了扣子三方插件【视频剪辑工具箱】的【save_draft】工具。

5.6. 结束

  • draft_id:草稿ID,传到视频结尾的工作流继续剪辑
  • draft_url:草稿下载地址,可以到“视频剪辑小助手”下载草稿
  • end_us:歌曲解说视频结束位置,视频结尾从这里开始
  • start_us:歌曲解说视频开始位置

6. 总结

本文介绍了“每天听懂一首歌”工作流中的歌曲解说部分,经过对这个工作流的拆解独立成三个工作流,觉得每个单独的工作流不算特别复杂,而且还可以独立调试,方便不少,也便于修改。

本文的分享就到这里,如果您觉得有收获的话,可以给个一键三连,您的鼓励是吾鳴持续输出的最大动力。

最近实战了一些扣子(Coze)工作流相关的案例,包含小红薯图文生成、爆款视频剪辑、办公提效等扣子案例,内附详细的教程和工作流安装包,感兴趣的朋友可以来个一键三连(必须动作) ,文章评论区评论“扣子案例”领取(这些案例不包含本文分享的案例,如果需要本文分享的案例安装包可以后台私信我)。