Agent Skill 营销与SEO

网页抓取

从URL获取并提取可读文本内容,随后进行摘要或呈现关键信息。

查看 GitHub 仓库 ↗ ⭐ 14 Stars

📌 Skill基础信息

  • Skill名称:synapse.web-scrape
  • 简称:网页抓取技能
  • 来源:社区第三方(UpayanGhosh/Synapse-OSS)
  • 运行宿主:仅限 Synapse-OSS Agent 框架运行
  • 核心定位:从指定URL抓取可读文本内容并进行智能摘要或关键信息提取,适用于网页内容分析场景

🧩 内部核心组成

本Skill采用单一功能设计,核心组件包括:

  • 子Agent集合:【无公开信息】
  • 斜杠命令:无独立斜杠命令,通过关键词触发
  • MCP工具:无
  • 模板文件:无
  • Hooks钩子:无
  • 规则约束:内置内容处理规则(见下文)
  • 目录结构:入口点位于 scripts/scrape.py:scrape_url_context

关键词触发机制

触发短语功能简述
scrape触发网页抓取功能
fetch this page请求获取页面内容
read this url读取URL内容
get content from从指定来源获取内容

🛠 安装与启用方式

前置要求

  • 已部署 Synapse-OSS Agent 框架
  • 网络访问权限(需 network:fetch 权限)

安装步骤

skills install --user UpayanGhosh/Synapse-OSS

启用配置

  • 自动启用(enabled: true)
  • 无需额外配置,安装后即可通过触发词调用

📋 标准工作流

  1. 用户输入:用户提供URL并请求内容抓取(使用触发关键词)
  2. 内容获取:Skill通过HTTP请求抓取目标网页内容
  3. 文本提取:提取可读文本内容,最多保留8000字符
  4. 上下文注入:将提取内容以 context_block 形式注入Agent上下文
  5. 智能处理:Agent基于提取内容进行:

- 直接回答用户具体问题

- 摘要关键信息(主题、事实、引用等)

- 注明来源URL

- 内容合成与精简

⚠️ 关键限制、缺陷、注意事项

技术限制

  • 仅支持纯文本提取,无法处理JavaScript渲染内容
  • 需要认证的页面无法正常抓取
  • 内容截断限制:最大8000字符
  • 不支持云环境部署(cloud_safe: false)

适用性限制

  • 适合:静态文本页面、新闻文章、文档页面
  • 不适合:动态网页、需要登录的页面、复杂交互式应用

生产环境警告

  • 不建议直接用于生产环境
  • 缺乏错误重试机制
  • 无内容缓存策略
  • 可能遇到网站反爬虫限制

✅ 适用场景 & ❌ 不适合场景

✅ 适用场景

  • 技术文档快速摘要
  • 新闻内容要点提取
  • 静态网页信息检索
  • 研究资料初步整理
  • 内容监控和变化检测

❌ 不适合场景

  • 需要完整页面渲染的动态网站
  • 需要用户交互的复杂Web应用
  • 敏感或需要认证的私有内容
  • 高精度要求的商业数据采集
  • 大规模批量抓取任务

如何安装

skills install --user UpayanGhosh/Synapse-OSS

通用安装教程:在哪里输入上面的命令

上面的命令本质是在「终端 / 命令行」中调用技能管理器,把该 Skill 下载并注册到你的 AI 工具。各主流工具打开终端的位置不同,按下面操作即可:

  1. 打开工具自带的终端面板,或系统终端(macOS「终端」、Windows「PowerShell」、Linux「Terminal」)。
  2. 把上面的安装命令复制进去,回车运行,等待下载与注册完成。
  3. 重启或重新加载 AI 工具,让新安装的 Skill 被识别。
  4. 新建对话并触发:直接描述用途,或通过该工具的技能 / 斜杠菜单选中此 Skill。
Claude 桌面版(macOS / Windows)

桌面版没有内置命令行,Skill 需通过 Claude Code CLI 安装。打开系统终端,先执行 npm install -g @anthropic-ai/claude-code,再运行上面的安装命令;完成后完全退出并重新打开 Claude。

Claude Code(终端 CLI)

直接在项目目录的终端里运行上面的命令即可。也可先输入 claude 启动交互界面,再在对话中引用该 Skill(/ 斜杠菜单或直接描述用途)。

VS Code(含 GitHub Copilot)

打开终端面板:菜单「终端 → 新建终端」,或快捷键 Ctrl+`(macOS 为 ⌃+`)。在终端里运行上面的命令;装完后执行「重新加载窗口」(Ctrl+Shift+P → Reload Window),让 Copilot 等扩展识别新技能。

Cursor

底部「终端」面板(Ctrl+`)即是内置终端。粘贴运行上面的命令,完成后在命令面板执行「Reload Window」刷新,再开始对话。

Windsurf

底部「终端」面板运行命令;也可直接使用其内置 Agent 终端,在对话侧执行安装。

其他工具(ChatGPT、本地脚本等)

不支持本地终端的产品,可先在本机终端完成安装,再在对话中描述该 Skill 的能力让其调用;不同工具的命令格式请以其官方文档为准。

风险提示

✅ 低风险

自动扫描未发现高危命令、隐私抓取或数据外传行为。仍建议安装前快速浏览仓库代码。

相似 Skill 推荐

笔记本LM
teng-lin/notebooklm-py
中风险

Google NotebookLM的完整API——提供程序化访问,包括Web UI中没有的功能。可创建笔记本、添加来源、生成所有类型的内容,并以多种格式下载。通过显式输入/notebooklm或意图如“创建关于X的播客”

技能优化-睡眠
microsoft/SkillOpt
低风险

仅供参考的OpenClaw对SkillOpt-Sleep的改编。用于学习或移植贡献的DeepSeek包装器,而非即用型安装。

进攻性Active Directory
SnailSploit/Claude-Red
中风险

针对内部网络红队演练的Active Directory攻击方法论。涵盖侦察(BloodHound、PowerView、ADExplorer)、凭据滥用(Kerberoasting、ASREProasting、NTLM中继

Claude 开源情报技能
elementalsouls/Claude-OSINT
低风险

8个Claude技能 · 100多种侦察能力 · 80个秘密正则表达式模式 · 80多个黑客搜索语法 · 9个只读凭证验证器 · 27个攻击路径模板 · 约10,000行结构化战术。即插即用的SKILL.md文件,将Cl