首页 > AI教程资讯

Sitemcp:将网站变成MCP服务器的一个开源项目

文章来源:08AI导航网发布时间:2025-04-09 14:39:52

sitemcp是什么?

sitemcp能够抓取网站内容并缓存,支持使用micromatch指定抓取的页面路径以及 CSS 选择器来精细化选择页面内容,并把抓取的内容用作MCP服务器的数据源,也就是说它把静态网站变成了一个可交互的知识库,配合MCP客户端进行提问,获取更精准的信息。

sitemcp是什么?.jpg

sitemcp功能

内容抓取与缓存:可以抓取指定网站的全部或部分页面,并将其缓存起来。支持使用 micromatch 来指定抓取的页面路径,例如:

sitemcphttps://vite.dev-m"/blog/**"-m"/guide/**"

内容选择器:在某些页面中,mozilla/readability 提取的内容可能不够准确,此时可以通过指定 CSS 选择器来精确提取可读内容:

sitemcphttps://vite.dev--content-selector".content"

与 MCP 客户端配合使用:sitemcp 可以与 MCP 客户端(如 Claude Desktop)配合使用。通过配置文件,可以在客户端中启动 sitemcp 服务器。例如:

{"mcpServers":{"daisy-ui":{"command":"npx","args":["-y","sitemcp","https://daisyui.com","-m","/components/**",]}}}

缓存机制:默认会在 ~/.cache/sitemcp 中缓存抓取的页面。如果不需要缓存,可以通过 --no-cache 标志来禁用。

sitemcp应用

sitemcp 等于是把静态网站变成了一个可交互的知识库,配合 MCP 客户端进行提问,解锁了更丰富的应用场景。例如,用户可以将抓取的网站内容作为知识库,通过 MCP 客户端进行提问,获取更精准的信息。

sitemcp使用教程

安装:sitemcp 支持多种安装方式。可以使用以下命令进行一次性安装:

bunxsitemcpnpxsitemcppnpxsitemcp

或者,也可以将其全局安装:

buni-gsitemcpnpmi-gsitemcppnpmi-gsitemcp

使用:使用时只需指定目标网站的 URL:

sitemcphttps://daisyui.com

还可以通过 --concurrency 参数指定并发数,以提高抓取效率:

sitemcphttps://daisyui.com--concurrency10

github地址:https://github.com/ryoppippi/sitemcp