Run This Ai
EN DE

EvalScope

Ein schlankes und anpassbares Framework für die effiziente Evaluierung und das Performance-Benchmarking großer Modelle (LLMs, VLMs, KI-Agenten).

★ 3,183 GitHub Apache-2.0 llmevaluationbenchmarkvlmagents LLM & Chat

Überblick

EvalScope ist ein schlankes, anpassbares Framework des ModelScope-Teams von Alibaba für die effiziente Evaluierung und das Performance-Benchmarking großer Modelle – einschließlich LLMs, VLMs und KI-Agenten. Es bietet eine einheitliche API zur Ausführung von Benchmarks wie MMLU, GSM8K und HumanEval, unterstützt native sowie OpenAI-kompatible Modell-APIs und lässt sich nahtlos in das ModelScope-Ökosystem integrieren. Evaluieren Sie Modelle über mehrere Benchmarks hinweg mit einem einzigen Befehl, erstellen Sie detaillierte Berichte und vergleichen Sie Ergebnisse direkt miteinander.

Anforderungen

Min vCPU
2
Min RAM
4096 MB
Min Disk
10 GB
Rec vCPU
4
Rec RAM
8192 MB
Rec Disk
20 GB

Empfohlener VPS

Hostinger · KVM 4

4 vCPU · 16384 MB · 200 GB

$11.99
Zum Anbieter

Hostinger · KVM 4

4 vCPU · 16384 MB · 200 GB

$11.99
Zum Anbieter

Hostinger · KVM 8

8 vCPU · 32256 MB · 400 GB

$20.00
Zum Anbieter

Affiliate-Hinweis

Docker Compose

# Generated by Run This Ai — docker-compose.yml
services:
  evalscope:
    image: primussafe/evalscope:latest
    restart: unless-stopped
    ports:
      - 8080:8080
    volumes:
      - ./data/evalscope:/data

Bester VPS für EvalScope →

Verwandte Tools

NextChat

Cross-platform ChatGPT web UI with multi-model support for Ollama, Claude, Gemini, and more

Lobe Chat

Extensible, open-source ChatGPT alternative with plugins, knowledge base, and multi-LLM support

Open WebUI

User-friendly WebUI for LLMs (Ollama, OpenAI API)

text-generation-webui

Run local LLMs with a powerful web interface — text, vision, tool-calling, and OpenAI-compatible API

Streamlit

Build and share data apps in pure Python — fast

Gradio

Build and share delightful machine learning apps in Python

Anleitungen & Artikel

EvalScope Tutorial: Benchmark Your LLM in 5 Minutes

A hands-on tutorial to install EvalScope, run your first benchmark on MMLU, GSM8K, and HumanEval with a single command, and read the results.

Aug 3, 2026

EvalScope: The Complete Guide to LLM Evaluation & Benchmarking

Everything you need to know about EvalScope, the streamlined evaluation framework for LLMs, VLMs, and AI agents from Alibaba ModelScope — benchmarks, APIs, and deployment.

Aug 3, 2026