MATH (Hendrycks) — LLM Ewaluacja i benchmarki Dataset
12,500 competition mathematics problems across 7 subjects (algebra, calculus, number theory, etc.) with step-by-step solutions. The key benchmark for evaluating mathematical reasoning in LLMs — requires multi-step problem-solving and symbolic manipulation.
Dataset Details
| Provider | hendrycks |
| Category | Ewaluacja i benchmarki |
| Size | 12,500 Problems |
| License | MIT |
| Downloads | 890k |
| Tags | Competition Math, Multi-step, Benchmark, Symbolic Reasoning |
from datasets import load_dataset
ds = load_dataset("hendrycks/competition_math")
Powiązane zbiory danych
Najczęstsze pytania
Czy mogę użyć MATH (Hendrycks) komercyjnie?
Tak — MATH (Hendrycks) jest udostępniony na licencji MIT, liberalnej licencji pozwalającej na użycie komercyjne, w tym trenowanie modeli wdrażanych w produkcie. Przed publikacją sprawdź wymogi atrybucji na karcie zbioru.
Ile danych zawiera MATH (Hendrycks) i czy potrzebuję wszystkich?
MATH (Hendrycks) zawiera 12,500 Problems. To benchmark ewaluacyjny, używany w całości do mierzenia modeli — nigdy nie mieszaj go z danymi treningowymi, bo wyniki benchmarku stracą sens.
Do czego MATH (Hendrycks) nadaje się najlepiej?
Benchmarking competition math ability. Należy do sekcji „Ewaluacja i benchmarki" naszego centrum zbiorów danych, gdzie znajdziesz alternatywy i zbiory komplementarne.
← Wszystkie zbiory danych | Fine-Tuning Guide