| OpenChat-3.5-1210 7B |
- Accuracy
- 28.9
- Parameters (Billions)
- 7
|
OpenChat: Advancing Open-source Language Models with Mixed-Quality Data 2023-09-20 |
코드 1 |
| OpenChat-3.5 7B |
- Accuracy
- 28.6
- Parameters (Billions)
- 7
|
OpenChat: Advancing Open-source Language Models with Mixed-Quality Data 2023-09-20 |
코드 1 |
| Mixtral 8x7B (maj@4) |
- Accuracy
- 28.4
|
Mixtral of Experts 2024-01-08 |
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 |
| Minerva 62B (4-shot) |
- Accuracy
- 27.6
- Parameters (Billions)
- 62
|
Solving Quantitative Reasoning Problems with Language Models 2022-06-29 |
코드 1 |
| MetaMath 70B |
- Accuracy
- 26.0
- Parameters (Billions)
- 70
|
MetaMath: Bootstrap Your Own Mathematical Questions for Large Language Models 2023-09-21 |
코드 1 |
| MuggleMATH 7B |
- Accuracy
- 25.8
- Parameters (Billions)
- 7
|
MuggleMath: Assessing the Impact of Query and Response Augmentation on Math Reasoning 2023-10-09 |
코드 1 |
| Minerva 8B (maj1@k, k=64) |
- Accuracy
- 25.4
- Parameters (Billions)
- 8
|
Solving Quantitative Reasoning Problems with Language Models 2022-06-29 |
코드 1 |
| MathCoder-L-7B |
- Accuracy
- 23.3
- Parameters (Billions)
- 7
|
MathCoder: Seamless Code Integration in LLMs for Enhanced Mathematical Reasoning 2023-10-05 |
코드 1 |
| WizardMath-70B-V1.0 |
- Accuracy
- 22.7
- Parameters (Billions)
- 70
|
WizardMath: Empowering Mathematical Reasoning for Large Language Models via Reinforced Evol-Instruct 2023-08-18 |
코드 1 |
| Camelidae-8×34B (4-shot) |
- Accuracy
- 22.6
|
Parameter-Efficient Sparsity Crafting from Dense to Mixture-of-Experts for Instruction Tuning on General Tasks 2024-01-05 |
코드 1 · 코드 2 |
| MetaMath 13B |
- Accuracy
- 22.5
- Parameters (Billions)
- 13
|
MetaMath: Bootstrap Your Own Mathematical Questions for Large Language Models 2023-09-21 |
코드 1 |
| LLaMA 65B (maj1@k) |
- Accuracy
- 20.5
- Parameters (Billions)
- 65
|
LLaMA: Open and Efficient Foundation Language Models 2023-02-27 |
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19 · 코드 20 · 코드 21 · 코드 22 · 코드 23 · 코드 24 · 코드 25 · 코드 26 · 코드 27 · 코드 28 · 코드 29 · 코드 30 · 코드 31 · 코드 32 · 코드 33 · 코드 34 · 코드 35 · 코드 36 · 코드 37 · 코드 38 · 코드 39 · 코드 40 · 코드 41 · 코드 42 · 코드 43 · 코드 44 · 코드 45 · 코드 46 · 코드 47 · 코드 48 · 코드 49 · 코드 50 · 코드 51 · 코드 52 · 코드 53 · 코드 54 · 코드 55 · 코드 56 · 코드 57 |
| GAL 120B (5-shot) mCoT |
- Accuracy
- 20.4
- Parameters (Billions)
- 120
|
Galactica: A Large Language Model for Science 2022-11-16 |
코드 1 |
| MetaMath 7B |
- Accuracy
- 19.4
- Parameters (Billions)
- 7
|
MetaMath: Bootstrap Your Own Mathematical Questions for Large Language Models 2023-09-21 |
코드 1 |
| davinci-002 175B |
- Accuracy
- 19.1
- Parameters (Billions)
- 175
|
Solving Quantitative Reasoning Problems with Language Models 2022-06-29 |
코드 1 |
| Branch-Train-MiX 4x7B (sampling top-2 experts) |
- Accuracy
- 17.8
|
Branch-Train-MiX: Mixing Expert LLMs into a Mixture-of-Experts LLM 2024-03-12 |
코드 1 |
| GAL 120B <work> |
- Accuracy
- 16.6
- Parameters (Billions)
- 120
|
Galactica: A Large Language Model for Science 2022-11-16 |
코드 1 |
| LLaMA 33B-maj1@k |
- Accuracy
- 15.2
- Parameters (Billions)
- 33
|
LLaMA: Open and Efficient Foundation Language Models 2023-02-27 |
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19 · 코드 20 · 코드 21 · 코드 22 · 코드 23 · 코드 24 · 코드 25 · 코드 26 · 코드 27 · 코드 28 · 코드 29 · 코드 30 · 코드 31 · 코드 32 · 코드 33 · 코드 34 · 코드 35 · 코드 36 · 코드 37 · 코드 38 · 코드 39 · 코드 40 · 코드 41 · 코드 42 · 코드 43 · 코드 44 · 코드 45 · 코드 46 · 코드 47 · 코드 48 · 코드 49 · 코드 50 · 코드 51 · 코드 52 · 코드 53 · 코드 54 · 코드 55 · 코드 56 · 코드 57 |
| Minerva 8B |
- Accuracy
- 14.1
- Parameters (Billions)
- 8
|
Solving Quantitative Reasoning Problems with Language Models 2022-06-29 |
코드 1 |
| WizardMath-13B-V1.0 |
- Accuracy
- 14.0
- Parameters (Billions)
- 13
|
WizardMath: Empowering Mathematical Reasoning for Large Language Models via Reinforced Evol-Instruct 2023-08-18 |
코드 1 |
| Mistral 7B (maj@4) |
- Accuracy
- 13.1
- Parameters (Billions)
- 7
|
Mistral 7B 2023-10-10 |
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 |
| GAL 30B (5-shot) mCoT |
- Accuracy
- 12.7
- Parameters (Billions)
- 30
|
Galactica: A Large Language Model for Science 2022-11-16 |
코드 1 |
| Mistral 7B (maj@4) |
- Accuracy
- 12.7
- Parameters (Billions)
- 7
|
Mixtral of Experts 2024-01-08 |
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 |
| GAL 30B <work> |
- Accuracy
- 11.4
- Parameters (Billions)
- 30
|
Galactica: A Large Language Model for Science 2022-11-16 |
코드 1 |
| WizardMath-7B-V1.0 |
- Accuracy
- 10.7
- Parameters (Billions)
- 7
|
WizardMath: Empowering Mathematical Reasoning for Large Language Models via Reinforced Evol-Instruct 2023-08-18 |
코드 1 |
| LLaMA 65B |
- Accuracy
- 10.6
- Parameters (Billions)
- 65
|
LLaMA: Open and Efficient Foundation Language Models 2023-02-27 |
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19 · 코드 20 · 코드 21 · 코드 22 · 코드 23 · 코드 24 · 코드 25 · 코드 26 · 코드 27 · 코드 28 · 코드 29 · 코드 30 · 코드 31 · 코드 32 · 코드 33 · 코드 34 · 코드 35 · 코드 36 · 코드 37 · 코드 38 · 코드 39 · 코드 40 · 코드 41 · 코드 42 · 코드 43 · 코드 44 · 코드 45 · 코드 46 · 코드 47 · 코드 48 · 코드 49 · 코드 50 · 코드 51 · 코드 52 · 코드 53 · 코드 54 · 코드 55 · 코드 56 · 코드 57 |
| PaLM 540B |
- Accuracy
- 8.8
- Parameters (Billions)
- 540
|
Solving Quantitative Reasoning Problems with Language Models 2022-06-29 |
코드 1 |
| PaLM 540B (5-shot) mCoT |
- Accuracy
- 8.8
- Parameters (Billions)
- 540
|
Galactica: A Large Language Model for Science 2022-11-16 |
코드 1 |
| LLaMA 13B-maj1@k |
- Accuracy
- 8.8
- Parameters (Billions)
- 13
|
LLaMA: Open and Efficient Foundation Language Models 2023-02-27 |
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19 · 코드 20 · 코드 21 · 코드 22 · 코드 23 · 코드 24 · 코드 25 · 코드 26 · 코드 27 · 코드 28 · 코드 29 · 코드 30 · 코드 31 · 코드 32 · 코드 33 · 코드 34 · 코드 35 · 코드 36 · 코드 37 · 코드 38 · 코드 39 · 코드 40 · 코드 41 · 코드 42 · 코드 43 · 코드 44 · 코드 45 · 코드 46 · 코드 47 · 코드 48 · 코드 49 · 코드 50 · 코드 51 · 코드 52 · 코드 53 · 코드 54 · 코드 55 · 코드 56 · 코드 57 |
| LLaMA 33B |
- Accuracy
- 7.1
- Parameters (Billions)
- 33
|
LLaMA: Open and Efficient Foundation Language Models 2023-02-27 |
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19 · 코드 20 · 코드 21 · 코드 22 · 코드 23 · 코드 24 · 코드 25 · 코드 26 · 코드 27 · 코드 28 · 코드 29 · 코드 30 · 코드 31 · 코드 32 · 코드 33 · 코드 34 · 코드 35 · 코드 36 · 코드 37 · 코드 38 · 코드 39 · 코드 40 · 코드 41 · 코드 42 · 코드 43 · 코드 44 · 코드 45 · 코드 46 · 코드 47 · 코드 48 · 코드 49 · 코드 50 · 코드 51 · 코드 52 · 코드 53 · 코드 54 · 코드 55 · 코드 56 · 코드 57 |