Memorize Memorize

GSM8K, MT Bench, MMLU에 대해서 정리  1. GSM8K1. GSM8K란 무엇인가?GSM8K (Grade School Math 8K):약 8,000개의 초등학교 수준의 수학 문제로 구성된 데이터셋문제는 텍스트 형식으로 주어지며, 언어 모델이 문제를 읽고 풀이 과정을 통해 답을 도출해야 함예를 들어:문제: "Sally has 3 apples. She buys 2 more. How many apples does she have now?"정답: "5"2. 데이터셋의 구성(1) 문제 유형문제는 초등학교 수학에서 다루는 다양한 주제를 포함산술 계산 (덧셈, 뺄셈, 곱셈, 나눗셈)비율 및 비례 계산시간 계산거리와 속도 계산논리적 사고 문제단순한 계산부터 복잡한 다단계 추론 문제까지 다양한 난이도를 포..