使用时机
当用户想要搜索、导入或分析来自TikTok、YouTube或Instagram的视频内容,从录音中总结会议或讲座,从视频内容构建可搜索的知识库,或研究社交媒体趋势和创作者时,使用此技能。
搜索和分析视频
描述
此技能使AI代理能够使用Memories.ai的大型视觉记忆模型(LVMM)搜索、导入和分析视频内容。与一次性视频分析工具不同,它提供持久化的视频智能——视频被索引一次后,可在多次会话中反复查询。支持社交媒体导入(TikTok、YouTube、Instagram)、会议总结、知识库构建以及通过记忆增强生成(MAG)进行跨视频问答。
概述
该技能将21个API命令封装成工作流导向的参考指南,由代理按需加载。SKILL.md中的路由表自动将用户意图映射到正确的工作流。
何时使用此技能
- 当需要分析或询问关于某个URL视频的问题时
- 当需要按主题、标签或创作者在TikTok、YouTube或Instagram上搜索视频时
- 当需要从录音中总结会议、讲座或网络研讨会时
- 当需要从视频内容和文本记忆构建可搜索的知识库时
- 当需要研究社交媒体内容趋势、影响者或病毒式传播模式时
- 当需要使用AI视觉分析或描述图像时
工作原理
步骤1:意图检测
代理读取SKILL.md工作流路由器,并将用户请求匹配到6个意图类别之一。
步骤2:参考加载
代理加载相应的参考文件(例如,video_qa.md用于视频问答,social_research.md用于社交媒体研究)。
步骤3:工作流执行
代理按照分步工作流执行:上传/导入 -> 等待处理 -> 分析/聊天 -> 呈现结果。
示例
示例1:视频问答
用户:“这个视频的关键论点是什么?https://youtube.com/watch?v=abc123”
代理:上传视频 -> 等待处理 -> 使用chat_video提问 -> 呈现结构化摘要
示例2:社交媒体研究
用户:“TikTok上关于可持续时尚什么内容最火?”
代理:使用search_public查找流行视频 -> 导入热门结果 -> 分析内容模式
示例3:会议笔记
用户:“总结这次会议录音并提取行动项”
代理:上传录音 -> 等待 -> 获取转录 -> 使用chat_video生成包含行动项的结构化摘要
最佳实践
- 始终等待视频处理完成后再查询
- 使用caption_video进行快速分析(无需上传)
- 使用chat_video进行深入的、多轮分析(需要上传)
- 使用search_audio查找视频中的特定时刻或引用
- 使用memory_add存储重要发现以便后续检索
常见陷阱
-
问题: 在处理完成之前查询视频 解决方案: 上传后始终使用
wait命令,然后再进行分析 -
问题: 仅需快速描述时却上传了视频 解决方案: 对于一次性分析使用
caption_video;仅在上传用于重复查询时上传
限制
- 视频处理需要1-5分钟,取决于长度
- 免费层级限制为100个积分
- 社交媒体导入需要公开内容
- 音频搜索仅适用于已处理的视频
相关技能
- 视频分析工具(用于一次性分析)
- 网络搜索技能(用于非视频内容研究)