benchmark

Benchmarken von LLMs durch Kämpfe in Street Fighter 3! Die neue Art, die Qualität eines LLMs zu bewerten

pytest-Fixture für das Benchmarken von Code

Schnelles und einfaches Benchmarking für Rust-Projekte

[pip install medmnist] 18 standardisierte Datensätze für die 2D- und 3D-Biomedizinische Bildklassifizierung

Schneller Compiler für C#-Expression-Trees und die leichtgewichtige LightExpression-Alternative. Diagnose- und Codegenerierungstools für Expressions.

SMAC: Die StarCraft Multi-Agent Challenge

Modulares Deep-Reinforcement-Learning-Framework in PyTorch. Begleitbibliothek zum Buch "Foundations of Deep Reinforcement Learning".

Neueste Fortschritte beim System-2-Reasoning.

[NeurIPS '25] Wissensgraphen-Generierung aus beliebigen Texten

GitHub Action für kontinuierliches Benchmarking zur Leistungssicherung

Ein besserer Lastgenerator für Locust, geschrieben in Golang.

LongBench v2 und LongBench (ACL 25'&24')

KernelBench: Können LLMs GPU-Kernel schreiben? – Benchmark + Toolkit mit Torch -> CUDA (+ weitere DSLs)

PDEBench: Ein umfangreicher Benchmark für wissenschaftliches maschinelles Lernen

Eine Sammlung von Benchmarking-Skripten für Linux-Server.

Rechenrahmen für Reinforcement Learning in der Verkehrssteuerung

Benchmark für Vektordatenbanken

JMLR: OmniSafe ist ein Infrastruktur-Framework zur Beschleunigung der SafeRL-Forschung.

OpenSTL: Ein umfassender Benchmark für räumlich-zeitliches prädiktives Lernen

🚀 Schneller Primzahlengenerator

ClickBench: Ein Benchmark für analytische Datenbanken

lzbench ist ein In-Memory-Benchmark von Open-Source-Kompressionstools

NoSQL Redis- und Memcache-Traffic-Generierungs- und Benchmarking-Tool.

Model Zoo für OpenCV DNN und Benchmarks.

TorchBench ist eine Sammlung von Open-Source-Benchmarks zur Bewertung der PyTorch-Leistung.

Python-Performance-Benchmark-Suite

DeepSeek V4 × J-Space-Fähigkeitsrealisierungsbericht — Benchmark-Belege dafür, dass J-Space den Fähigkeitsrealisierungsverlust bei DeepSeek V4 (Flash/Pro) reduziert.

Offizielle Implementierung von "ADBench: Anomaly Detection Benchmark", NeurIPS 2022.

Airspeed Velocity: Ein einfaches Python-Benchmarking-Tool mit webbasiertem Reporting

Molecular Sets (MOSES): Eine Benchmark-Plattform für Modelle zur molekularen Generierung