DeepSeek: R1 Distill Llama 8B     
 - 31.25K Context
 - 0.04/M Input Tokens
 - 0.04/M Output Tokens
 
- DeepSeek
 - Text 2 text
 - 07 Feb, 2025
 
DeepSeek R1 Distill Llama 8B 是一个基于 Llama-3.1-8B-Instruct 的蒸馏大型语言模型,使用来自 DeepSeek R1 的输出。该模型结合了先进的蒸馏技术,在多个基准测试中实现了高性能,包括:
- AIME 2024 pass@1: 50.4
 - MATH-500 pass@1: 89.1
 - CodeForces Rating: 1205
 
该模型利用 DeepSeek R1 输出的微调,使其在性能上与更大的前沿模型相媲美。
Hugging Face: