GSM8K / GSM8K
📖 GSM8K
Definition (English):
GSM8K (Grade School Math 8K) is a benchmark of 8,500 grade-school math word problems requiring multi-step reasoning. It tests basic arithmetic, algebra, and logical reasoning. Chain-of-thought prompting dramatically improves performance. GPT-4 scores ~95%, while smaller models struggle. GSM8K is widely used to evaluate mathematical reasoning capabilities of LLMs.
📖 GSM8K
Định nghĩa (Tiếng Việt):
GSM8K (Grade School Math 8K) là benchmark gồm 8,500 bài toán toán tiểu học yêu cầu lý luận nhiều bước. Nó kiểm tra số học cơ bản, đại số và lý luận logic. Prompt chuỗi suy luận cải thiện đáng kể hiệu suất. GPT-4 đạt ~95%, trong khi mô hình nhỏ hơn gặp khó khăn. GSM8K được sử dụng rộng rãi để đánh giá khả năng lý luận toán học của LLM.
📂 Phân loại: Benchmarks