COZE扣子工作流一键生成爆款诗集短视频，保姆级教程-智能体搭建-项目实操
智能体搭建
- 注册与登录
- 访问COZE 官网，进行账号注册，如果已有账号则直接登录。
- 创建智能体
- 登录后，进入开发平台，点击 “快速开始”。
- 在左侧选择 “+”，点击 “创建应用”，为应用起一个合适的名称后选择 “确认”。
- 在左侧资源库页面右上角单击 “+ 资源”，并选择 “工作流”。
- 设置工作流的名称与描述后单击 “确认”，完成智能体的初步创建。
- 设置提示词
- 对于生成诗集短视频的智能体，系统提示词可以设定为：“你是一位擅长解读诗集并能将诗句转化为生动画面描述的诗人。你要将诗集里的每一句诗先翻译成通俗易懂的白话文，再根据白话文联想具体画面，转化为 AI 绘画提示词。提示词要包含人物形象、背景环境、光线效果、画面构图、拍摄角度等元素，整体画风为适合短视频的风格，画面色彩丰富，细节饱满，能体现出诗歌的意境。输出仅包含生图提示词 prompt，不要包含其他信息。”
- 用户提示词则根据具体输入的诗集内容来确定，例如用户输入 “《静夜思》”，则围绕《静夜思》进行相关提示和操作。
- 选择大模型
- COZE 平台提供多种大模型，如适合自然语言处理和图像生成的通用模型等。根据诗集内容和想要的效果来选择，比如如果希望生成的画面具有丰富的想象力和细腻的情感表达，可以选择对文学理解和图像生成能力较强的模型。
- 配置大模型参数，随机性可根据需要适当调整，如果想要生成的结果更具创意可以调高随机性；回复长度可根据实际情况拉到合适长度，以确保生成的提示词等内容完整；携带上下文参数根据是否需要模型参考之前的操作来决定，一般生成诗集短视频可以设置为携带一定的上下文记忆，便于连贯地处理整首诗。
- 选择插件
- 对于诗集短视频生成，需要选择如音频合成插件，用于将朗诵诗集的音频片段合成为一个完整音频；图像生成插件，根据提示词生成图片；图生视频插件，将图片转化为视频；字幕生成插件，为视频添加字幕等。
项目实操
- 开始节点设置
- 确定输入参数，比如设置一个 “poemTitle” 参数用于输入诗集名称或具体诗篇名称，设置为必填项。
- 如果有特定的风格要求，也可以设置相关参数，如 “style” 参数用于选择古风、现代简约等风格。
- 拆分诗篇内容
- 添加一个拆分节点，将输入的诗篇内容按句子进行拆分，输出成数组形式，方便后续对每一句进行单独处理。
- 批处理生成画面和声音
- 通过批处理节点，针对每一句诗生成对应的画面和声音。
- 首先是生图提示词生成，根据每一句诗，利用大模型生成画图提示词，按照系统提示词的要求，将抽象的诗句转化为具体的画面元素描述。
- 接着进行图像生成，根据生成的画图提示词，调用图像生成插件生成图片。
- 然后生成图生视频提示词，让视觉模型理解图片并输出图生视频提示词，再通过图生视频插件将图片转化为视频片段。
- 对于声音部分，使用语音合成插件将每一句诗读出来，生成音频片段。
- 音频和视频处理
- 音频合并，将批处理生成的音频片段合成为一个完整的音频。
- 视频合并，将图生视频生成的视频片段进行合并。
- 字幕处理
- 字幕提取，调用字幕提取插件，根据音频内容提取文字作为字幕。
- 时间线调整，确保字幕与音频和视频内容精准同步，对字幕的出现时间和持续时间进行精确设置。
- 封面制作
- 选择一张合适的图片作为封面基础，可以是生成的图片中的某一张。
- 使用画板插件，将图片进行裁剪和排版，添加诗集名称、作者等信息，制作出吸引人的封面。
- 最终合成与输出
- 将处理好的视频、音频、字幕和封面进行最终的合成，生成完整的诗集短视频。
- 可以选择直接在平台上进行预览，检查视频的效果，包括画面质量、音频视频同步情况、字幕是否准确等。
- 确认无误后，将短视频输出保存，可选择不同的格式和分辨率，以便发布到不同的平台上
声明：本站所有文章，如无特殊说明或标注，均为本站原创发布。任何个人或组织，在未征得本站同意时，禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。如若本站内容侵犯了原著者的合法权益，可联系我们进行处理。
评论(0)