AIツール
AIエージェント
MCP
ランキング
提出と広告
ログイン
JA
JA
ホーム
MCP
Web Crawler MCP Server
Web Crawler MCP Server
0
Visit MCP
0 レビュー
0 Stars
AIアシスタント(Claude DesktopやCursorなど)をサポートするために、ウェブページから主なテキストコンテンツを抽出しクリーンアップするためのModel Context Protocol(MCP)サーバーで、Puppeteerのステルス機能を搭載してボット対策を回避し、簡単に統合できる。
追加日:
作成者:
Apr 21 2025
JonathanHsuHH
開発者ツール
研究とデータ
ブラウザ自動化
...
Web Crawler MCP Server
0 レビュー
0
0
AIアシスタント(Claude DesktopやCursorなど)をサポートするために、ウェブページから主なテキストコンテンツを抽出しクリーンアップするためのModel Context Protocol(MCP)サーバーで、Puppeteerのステルス機能を搭載してボット対策を回避し、簡単に統合できる。
追加日:
Created by:
Apr 21 2025
JonathanHsuHH
開発者ツール
研究とデータ
ブラウザ自動化
...
概要
機能とアプリケーション
FAQs
開発者
フィーチャー
Web Crawler MCP Serverとは?
このMCPサーバーは、AIアシスタントとMCPクライアント向けに調整されたウェブクロールとコンテンツ抽出ツールを提供します。Puppeteerを使用してボット対策を回避し、任意の公共ウェブページから主なテキストコンテンツを抽出し、読みやすさを向上させるためにホワイトスペースを正規化します。サーバーは、対話型モデルに適したプレーンなクリーンテキストを返すことでAIツールとのシームレスな通信を可能にし、ウェブコンテンツの統合を効率的かつ簡潔にします。MCP互換クライアントで直接実行または統合でき、簡単なセットアップと展開をサポートします。これにより、AIアプリケーションのためにウェブデータ収集を最適化し、自動化、研究、およびコンテンツ分析ワークフローを改善します。
誰がWeb Crawler MCP Serverを使うの?
AI開発者
研究科学者
コンテンツアナリスト
MCPクライアントユーザー
自動化エンジニア
Web Crawler MCP Serverの使い方は?
ステップ1:Node.js(v16以上)をインストールします
ステップ2:リポジトリをクローンします
ステップ3:依存関係をインストールするために'npm install'を実行する
ステップ4:サーバーを構築するために'npm run build'を実行する
ステップ5:'node build/index.js'でサーバーを起動する
ステップ6:このサーバーのアドレスに接続するようにMCPクライアントを構成する
Web Crawler MCP Serverの主な特長・利点
コア機能
URLから主テキストコンテンツを抽出
ボット回避のためのステルスプラグインを使用したPuppeteerを使用
ホワイトスペースを正規化した読みやすいテキストを返す
MCPクライアントとの簡単な統合をサポート
利点
AIのための効率的なウェブコンテンツ抽出を可能にする
ボット対策を回避するサポート
ウェブデータ収集ワークフローを簡素化
LLMs用のすぐに使えるプレーンテキストを提供する
Web Crawler MCP Serverの主な使用ケース・アプリケーション
AIトレーニングのためのウェブデータ収集
チャットボットやバーチャルアシスタントへのコンテンツ統合
ウェブコンテンツ分析に関する研究
自動化されたコンテンツ要約と処理
Web Crawler MCP ServerのFAQs
このMCPの主な機能は何ですか?
ウェブクロールにはどのツールを使っていますか?
このMCPをローカルで実行できますか?
このMCPと互換性のあるクライアントは何ですか?
セットアップの前提条件は何ですか?
これを使うのにコーディングの知識は必要ですか?
どのようなコンテンツタイプを抽出しますか?
ボット対策をどのように扱いますか?
このプロジェクトはオープンソースですか?
抽出プロセスをカスタマイズできますか?
開発者
JonathanHsuHH
あなたも好きかもしれません:
開発者ツール
MCP Desktop App
サーバーとクライアントの相互作用を管理するためのデスクトップアプリケーションで、包括的な機能を備えています。
開発者ツール
OS自動化
Eagle MCP Server
Eagle アプリとデータソース間のデータ交換を管理するための Model Context Protocol サーバーです。
開発者ツール
研究とデータ
Generic MCP Client Chat
チャット環境内でさまざまなMCPツールを統合して直接使用するためのチャットベースのクライアントで、生産性を向上させます。
開発者ツール
研究とデータ
Collection of MCP servers with integrated supergateway
複数の MCP サーバーをホストする Docker イメージで、Supergateway 統合を通じて統一されたエントリーポイントからアクセス可能です。
開発者ツール
研究とデータ
YNAB Server
MCPプロトコルを介してYNABアカウントの残高、取引、および取引の作成にアクセスします。
開発者ツール
クラウドプラットフォーム
Zerodha-MCP
リアルタイムのマルチクライアントZerodhaトレーディング操作を管理するための、高速でスケーラブルなMCPサーバー。
開発者ツール
クラウドプラットフォーム
Machine-To-Machine MCP Server SSH Client
MCPサーバーへのリモートツール利用のための安全なプロキシベースのアクセスを容易にするリモートSSHクライアント。
開発者ツール
OS自動化
Spring MCP Server
AI機能を統合したSpringベースのMCPサーバーで、Minecraftのmod間の通信プロトコルを管理および処理します。
開発者ツール
研究とデータ
Scira MCP Chat
必須のチャット機能を備えたミニマリスティックなMCPクライアントで、複数のモデルとコンテキスト相互作用をサポートします。
開発者ツール
研究とデータ
Authenticator MCP Server
AIエージェントがAuthenticatorアプリと安全に対話し、2FAコードとパスワードを取得できるMCPサーバー。
開発者ツール
セキュリティ
研究とデータ
CRIC物AgenceAI MCP Server
モデルコンテキストプロトコルをサポートするサーバー実装で、CRICの産業AI機能を統合しています。
研究とデータ
知識と記憶
SmartCityMCP
バレンシア市の交通、空気品質、天気、シェアサイクルデータを統合プロッキョンで提供します。
研究とデータ
モニタリング
Supabase MCP Client React App with Tambo
MCPツールとUIコンポーネント登録のためのTamboを通じてSupabaseとの統合を示すReactアプリケーション。
開発者ツール
研究とデータ
MCP Client with Brave Search
MCPプロトコルを利用し、効率的な通信を行うためにBrave Search APIを統合したMCPクライアントです。
開発者ツール
研究とデータ
Model Context Protocol (MCP) Server for Umbraco
Umbraco CMSと外部アプリケーション間のシームレスな通信を可能にするプロトコルサーバー。
開発者ツール
研究とデータ
NOL (Next.js Open Router Language)
NOLは、LangChainとOpen Routerを統合し、Next.jsを使用してマルチクライアントMCPサーバーを作成します。
開発者ツール
研究とデータ
Firebolt MCP Server
LLMをFireboltデータウェアハウスに接続し、自律的なクエリ実行、データアクセス、インサイト生成を実現します。
開発者ツール
研究とデータ
mcp-client
AIエージェントをMCPサーバーに接続し、ツールの発見と統合を可能にするクライアントフレームワークです。
開発者ツール
研究とデータ
Spring Link
Spring Link は、統一された環境内で複数の Spring Boot アプリケーションを効率的にリンクおよび管理することを促進します。
開発者ツール
研究とデータ
Open Multiple Model MCP Client
複数のMCPサーバーと対話するためのオープンソースクライアントで、Claudeのためのシームレスなツールアクセスを実現します。
開発者ツール
研究とデータ
ブラウザ自動化
Google Slides MCP Server
プログラムによって Google スライド プレゼンテーションを作成、読み取り、変更するためのサーバ プロトコル。
開発者ツール
研究とデータ
Viewport-Control MCP Server
TypeScriptを使用して、ビューポートの管理、スクリーンショットのキャプチャ、コンテンツの抽出のための高度なブラウザの自動化を可能にします。
開発者ツール
ブラウザ自動化
browser-use-mcp-server
AIエージェントがリアルタイムVNCストリーミングを介してブラウザを制御できるMCPサーバー。
開発者ツール
研究とデータ
mcp-client
ESLintサポートとReactプラグインを備えたTypeScriptベースのプロジェクトテンプレートです。
開発者ツール
研究とデータ
Web Eval Agent
ブラウザ自動化とネットワーク分析を通じて、Webアプリケーションを評価およびデバッグするための自律システム。
開発者ツール
研究とデータ
Selenium Based Testing MCP
ClaudeのようなAIクライアントとVS CodeのCopilotと統合されたSeleniumベースのテストMCPです。
開発者ツール
研究とデータ
Model Context Protocol Client for Go
RedisやGitHub、Google Maps、WebスクレイピングツールなどのMCPサーバーとの統合を容易にするGoライブラリ。
開発者ツール
ブラウザ自動化
Mcp-Client-with-Browswer-use
ブラウザの自動化とMinecraftサーバーとのインタラクションを可能にするPythonベースのMCPクライアントです。
開発者ツール
研究とデータ
MCP Server Browser
Minecraftサーバーの設定やプラグインの管理を簡単に行えるウェブベースのツール。
開発者ツール
ブラウザ自動化
mcp-client-repo-1745637339478
Seleniumやスクリプティングツールを使用して、オートメーションタスクを管理するためにMCPクライアントを介して作成されたリポジトリです。
開発者ツール
研究とデータ