AI导哈

网页内容提取工具

MCP Web Scraper 是一个用于抓取网页并提取其主要内容的服务器工具。

  • by anpl1623
  • Python
  • 本地部署
  • 更新于
在 GitHub 查看 anpl1623/MCP_WEBSCRAPER

使用说明

MCP网页抓取器

这是一个MCP服务器，它提供了一个抓取网页并提取其主要内容的工具。

特性

  • scrape_url：获取URL，删除杂乱（广告、导航等），并返回干净的文本内容。

安装

  1. 克隆仓库 或导航到该目录。
  2. 创建虚拟环境:
    python3 -m venv .venv
source .venv/bin/activate
  3. 安装依赖项:
    pip install -r requirements.txt

使用MCP桌面

要将此服务器与MCP Desktop一起使用，请将以下内容添加到您的 mcp_desktop_config.json:

{
  "mcpServers": {
    "web-scraper": {
      "command": "/absolute/path/to/your/venv/bin/python",
      "args": [
        "/absolute/path/to/your/server.py"
      ]
    }
  }
}

重要：替换 /absolute/path/to/your/... 使用系统上的实际绝对路径。

发展

要手动运行服务器（它使用stdio传输）：

python server.py

相关 MCP