MCPBench

MCPBenchは、MCPサーバーの評価フレームワークであり、Web検索、データベースクエリ、GAIAの3種類のサーバーをサポートしています。タスクの完了精度、レイテンシー、トークン消費量を評価し、同じLLMとエージェントの設定で比較します。特に、Brave SearchやDuckDuckGoなどのサーバーの性能を測定するために設計されています。

GitHubスター

201

ユーザー評価

未評価

お気に入り

0

閲覧数

6

フォーク

11

イシュー

6

技術情報

プログラミング言語

Python主要言語

システム要件

特定の要件は記載されていません

メンテナンス状況

アクティブ

GitHubトピック

benchmarkdatabasemcpmcp-serverwebsearch

作者情報

Model-as-a-Service in the making: bring accessible AI to all.

4,503

フォロワー

40

リポジトリ

0

Gist

0

貢献数

タグ

benchmark database mcp mcp-server websearch

関連するMCP

Model Context Protocol for WinDBG

SEC EDGAR MCPは、AIモデルを米国証券取引委員会のEDGARファイリングデータセットに接続するオープンソースのMCPサーバーです。このプロジェクトは、データ分析や機械学習の研究に役立つ情報を提供します。

mcp-server-bigquery

BigQuery MCPサーバーは、LLM（大規模言語モデル）がデータベーススキーマを検査し、SQLクエリを実行できるようにするためのサーバーです。このサーバーは、BigQueryの機能を活用してデータ分析を効率化し、開発者がデータにアクセスするための便利なツールを提供します。