AI 工具
AI 智能代理
MCP
排名
提交及廣告
登入
TW
TW
首頁
MCP
Web Crawler MCP Server
Web Crawler MCP Server
0
Visit MCP
0 評論
0 Stars
一個設計用於提取和清理網頁主要文本內容的Model Context Protocol(MCP)伺服器,支援像Claude Desktop和Cursor這樣的人工智慧助手,並使用隱形的Puppeteer來繞過反機器人保護並輕鬆整合。
新增日期:
創建者:
Apr 21 2025
JonathanHsuHH
開發者工具
研究與數據
瀏覽器自動化
...
Web Crawler MCP Server
0 評論
0
0
一個設計用於提取和清理網頁主要文本內容的Model Context Protocol(MCP)伺服器,支援像Claude Desktop和Cursor這樣的人工智慧助手,並使用隱形的Puppeteer來繞過反機器人保護並輕鬆整合。
新增日期:
Created by:
Apr 21 2025
JonathanHsuHH
開發者工具
研究與數據
瀏覽器自動化
...
概述
特徵與應用
常見問答
開發者
精選
Web Crawler MCP Server 是什麼?
這個MCP伺服器提供一個為人工智慧助手和MCP客戶端量身訂做的網頁爬取和內容提取工具。它使用帶有隱形插件的Puppeteer來繞過反機器人保護,從任何公共網頁中提取主要文本內容,並正規化空白字符以增進可讀性。伺服器透過返回適合對話模型的純淨文本,使得與人工智慧工具的無縫溝通成為可能,讓網頁內容整合變得高效且直觀。它支援直接運行或整合至MCP兼容客戶端,並且安裝和部署簡便。其能力為人工智慧應用優化了網頁數據的收集,提高了自動化,研究和內容分析工作流程。
誰會使用 Web Crawler MCP Server?
人工智慧開發者
研究科學家
內容分析師
MCP客戶端用戶
自動化工程師
如何使用 Web Crawler MCP Server?
步驟1:安裝Node.js(v16或更高版本)
步驟2:克隆儲存庫
步驟3:執行'npm install'以安裝依賴項
步驟4:執行'npm run build'來構建伺服器
步驟5:使用'node build/index.js'啟動伺服器
步驟6:配置您的MCP客戶端以連接到此伺服器的地址
Web Crawler MCP Server 的核心特徵與益處
主要功能
從網址中提取主要文本內容
使用隱形插件的Puppeteer來繞過反機器人
返回已正規化的可讀文本
支援與MCP客戶端的簡單整合
優點
讓人工智慧能夠有效地提取網頁內容
支援繞過反機器人措施
簡化網頁數據收集工作流程
提供即用的純文本給LLMs
Web Crawler MCP Server 的主要使用案例與應用
用於AI訓練的網頁數據收集
聊天機器人和虛擬助手的內容整合
網頁內容分析的研究
自動化內容摘要和處理
Web Crawler MCP Server 的常見問答
這個專案是開源的嗎?
此MCP的主要功能是什麼?
它使用哪些工具進行網頁爬取?
我可以在本地運行這個MCP嗎?
哪些客戶端與這個MCP兼容?
設置的先決條件是什麼?
使用這個需要編碼知識嗎?
它提取哪些內容類型?
它如何處理反機器人保護?
我可以自定義提取過程嗎?
開發者
JonathanHsuHH
您可能也喜歡:
開發者工具
MCP Desktop App
一款用於管理伺服器與客戶端互動的桌面應用程式,具備全面的功能。
開發者工具
作業系統自動化
Eagle MCP Server
一個為 Eagle 提供的 Model Context Protocol 伺服器,負責管理 Eagle 應用程式和數據來源之間的數據交換。
開發者工具
研究與數據
Generic MCP Client Chat
一個基於聊天的客戶端,直接在聊天環境中集成和使用各種 MCP 工具,以提高生產力。
開發者工具
研究與數據
Collection of MCP servers with integrated supergateway
一個 Docker 映像,承載多個 MCP 伺服器,透過整合 supergateway 以統一入口點訪問。
開發者工具
研究與數據
YNAB Server
透過 MCP 協議提供 YNAB 帳戶餘額、交易及交易創建的訪問權限。
開發者工具
雲端平台
Zerodha-MCP
一個快速可擴展的MCP伺服器,用於管理多客戶的即時Zerodha交易操作。
開發者工具
雲端平台
Machine-To-Machine MCP Server SSH Client
一個遠端SSH客戶端,方便安全、基於代理訪問MCP伺服器,以便利用遠端工具。
開發者工具
作業系統自動化
Spring MCP Server
一個基於Spring的MCP伺服器,整合了AI能力以管理和處理Minecraft模組的通信協議。
開發者工具
研究與數據
Scira MCP Chat
一款具有基本聊天功能的極簡MCP客戶端,支持多種模型和上下文交互。
開發者工具
研究與數據
Authenticator MCP Server
一個安全的MCP伺服器,讓AI代理與身份驗證器應用程式互動以獲取2FA代碼和密碼。
開發者工具
安全
研究與數據
CRIC物AgenceAI MCP Server
一個支持模型上下文協議的伺服器實現,整合CRIC的工業AI能力。
研究與數據
知識與記憶
SmartCityMCP
提供瓦倫西亞市即時交通、空氣質量、天氣及單車共享數據於一個統一的平台上。
研究與數據
監控
Supabase MCP Client React App with Tambo
一個展示通過MCP工具和Tambo進行Supabase集成的React應用程序,註冊UI組件。
開發者工具
研究與數據
MCP Client with Brave Search
整合 Brave Search API 用於網頁搜尋的 MCP 客戶端,利用 MCP 協議進行高效通信。
開發者工具
研究與數據
Model Context Protocol (MCP) Server for Umbraco
一個能夠實現 Umbraco CMS 與外部應用程式之間無縫通訊的協定伺服器。
開發者工具
研究與數據
NOL (Next.js Open Router Language)
NOL 整合了 LangChain 和 Open Router,以使用 Next.js 創建一個多客戶端的 MCP 伺服器。
開發者工具
研究與數據
Firebolt MCP Server
將LLM連接到Firebolt數據倉庫,以進行自主查詢、數據訪問和洞察生成。
開發者工具
研究與數據
mcp-client
一個用於將AI代理連接到MCP伺服器的客戶端框架,實現工具的發現和集成。
開發者工具
研究與數據
Spring Link
Spring Link 促進在統一環境中有效地鏈接和管理多個 Spring Boot 應用程序。
開發者工具
研究與數據
Open Multiple Model MCP Client
一個開源客戶端,用於與多個MCP伺服器互動,為Claude提供無縫的工具訪問。
開發者工具
研究與數據
瀏覽器自動化
Google Slides MCP Server
一種伺服器協議,可通過程式化方式創建、讀取和修改 Google 幻燈片演示文稿。
開發者工具
研究與數據
Viewport-Control MCP Server
透過 TypeScript 實現進階的瀏覽器自動化,涵蓋視窗管理、截圖捕獲以及內容提取。
開發者工具
瀏覽器自動化
browser-use-mcp-server
一個MCP伺服器,使AI代理能通過使用瀏覽器實現直接控制,並提供實時的VNC流媒體。
開發者工具
研究與數據
mcp-client
基於 TypeScript 的 React 和 Vite 專案模板,支持 ESLint 和 React 插件。
開發者工具
研究與數據
Web Eval Agent
通過瀏覽器自動化和網絡分析,自動評估和調試 Web 應用程序的系統。
開發者工具
研究與數據
Selenium Based Testing MCP
一個基於 Selenium 的測試 MCP,與類似 Claude 的 AI 客戶端和 VS Code 中的 Copilot 集成。
開發者工具
研究與數據
Model Context Protocol Client for Go
一個Go庫,便於與Redis、GitHub、Google Maps和網頁爬蟲工具等MCP伺服器的集成。
開發者工具
瀏覽器自動化
Mcp-Client-with-Browswer-use
一個基於 Python 的 MCP 客戶端,實現瀏覽器自動化以及與 Minecraft 伺服器的互動。
開發者工具
研究與數據
MCP Server Browser
一個基於網路的工具,方便瀏覽和管理Minecraft伺服器的配置和插件設置。
開發者工具
瀏覽器自動化
mcp-client-repo-1745637339478
通過MCP客戶端創建的用於管理自動化任務的存儲庫,使用Selenium和腳本工具。
開發者工具
研究與數據