Coze开发技能课：从插件开发到文本、视频处理，再到信息查询，带你解锁多领域技能

Coze开发技能课：从插件开发到文本、视频处理，再到信息查询，带你解锁多领域技能

插件开发

• 了解插件开发基础：Coze 平台允许通过添加 API 服务的 YAML 定义来创建插件。
• 插件创建步骤
  • 登录 Coze 平台，选择一个工作空间，点击 “插件” 选项卡。
  • 点击 “</>” 图标，在左侧 “ai_plugin（输入 JSON）” 面板中输入 API 的基本 URL（JSON 格式）。
  • 在右侧 “openapi（输入 YAML）” 面板中输入 API 路径和参数（YAML 格式）。
  • 点击导入的 API 以更新配置，在调试页面输入所需参数并点击 “运行” 来测试 API。
  • 若 API 运行成功，点击 “完成”。

文本处理

• 理解文本处理场景：文本处理节点适用于二次内容摘要、文本拼接、文本转义等场景。
• 文本处理操作
  • 添加 “文本处理” 节点，可将多段文字按照指定顺序组合成一段完整文字，引用变量的方式有 {{变量名}}，{{变量名。子变量名}}，{{变量名 (数组序号)}}。
  • 也可以用特定分隔符把一段文字拆分成多个小段，方便后续对不同部分进行不同处理。

视频处理

• 视频混剪工作流设计思路
  • 接受用户输入参数，判断用户是上传素材还是上传 sort 范围，若上传素材则转换为数组，若上传 sort 范围则查询数据库调取视频素材。
  • 利用大模型生成视频文案，对文案进行分段，再基于分段文案进行配音。
  • 将分段文案、配音、视频素材添加到剪映小助手插件中，最后导出草稿。
• 视频处理工作流实现
  • “开始节点” 用于接收视频素材。
  • 通过 “逻辑判断” 节点判断用户上传内容并进行相应处理。
  • 使用 “大模型” 节点生成与短视频匹配的文案。
  • 利用 “代码” 节点抽取文案、组装数据等。
  • 通过 “speech_synthesis” 节点根据文本生成音频，“alignTextToAudio” 节点将文本和音频进行时间线对齐。
  • 利用剪映小助手的 “add_audios”“add_videos”“add_captions” 等节点将视频要素添加到剪映小助手中。

信息查询

• 智能体信息查询基础：智能体可分析用户输入，根据预设逻辑和条件决定是否调用特定插件来执行任务或提供信息，涉及输入解析、意图识别、信息检索等环节。
• 信息查询操作与工具
  • 可通过在 Coze 平台创建智能体，设置相关参数和逻辑，利用其记忆功能（如变量、数据库、长期记忆等）来实现信息查询。
  • Coze 支持将 AI 智能体和应用发布为 API 服务，可通过 HTTP 方式与其交互，使用 cozepy 库更方便地调用 Coze 的 API 进行信息查询等操作