patronus-mcp-server
The Patronus MCP Server is an implementation of an MCP server for the Patronus SDK, providing a standardized interface for running powerful LLM system optimizations, evaluations, and experiments. It allows initialization with an API key and project settings, and supports both single and batch evaluations.
GitHub Stars
13
User Rating
Not Rated
Favorites
0
Views
28
Forks
3
Issues
0
Technical Information
Programming Languages
PythonPrimary Language
System Requirements
Python 3.7以上pipの最新バージョンProvided Features
APIキーとプロジェクト設定を使ったPatronusの初期化
設定可能な評価者を使用した単一評価の実行
複数の評価者を使用したバッチ評価の実行
データセットを使用した実験の実行
インタラクティブなテストスクリプトによる評価エンドポイントのテスト
Safety Analysis
Safety Score
Safe100/100
Recommended For
Recommended for developers looking to evaluate and optimize AI systems, particularly data scientists and machine learning engineers using Python.
Maintenance Status
StaleGitHub Topics
MCPLLM評価実験自動化PythonAPIデータ分析開発機械学習