WEB-SCRAPING-MCP

このプロジェクトは、Pythonを使用してウェブサイトからデータを自動的に取得するためのスクリプトを提供します。使いやすく、強力なライブラリを活用して、さまざまなウェブページから情報を抽出できます。データ分析や収集に役立つツールとして、幅広い用途に対応しています。

GitHubスター

15

ユーザー評価

未評価

お気に入り

0

閲覧数

7

フォーク

6

イシュー

1

インストール方法
難易度
中級
推定所要時間
10-20

インストール方法

You can run this server either locally or using the provided Docker configuration. This method bundles Python and all necessary libraries. You only need Docker installed on the host machine.
1 Install Docker: Download and install [Docker Desktop](https://www.docker.com/products/docker-desktop/) for your OS. Start Docker Desktop.
2 Clone Repository:
bash
    git clone https://github.com/your-username/your-repo-name.git # Replace with your repo URL
    cd your-repo-name
    
3 Create .env File: Create a file named .env in the project root directory and add your API keys:
.env
    # Required for the smart_extract tool
    GOOGLE_API_KEY=your_google_ai_api_key_here
    # Optional, checked by server but not currently used by tools
    # OPENAI_API_KEY=your_openai_key_here
    # MISTRAL_API_KEY=your_mistral_key_here
    
4 Build the Docker Image:
bash
    docker build -t crawl4ai-mcp-server .
    

追加リソース

作者情報
Maitreya Mishra

I'm Maitreya Mishra , an AI development intern @ ML research lab Parul University. I specialize in deep learning and Applied AI.

Gujarat , India

2

フォロワー

31

リポジトリ

0

Gist

0

貢献数