billion). NazwaData wydaniaParametryKoszt treningu (petaFLOP-dzień)Długość kontekstu (tokeny)Rozmiar korpusu (tokeny)LLaMA24 lutego 2023 6.7B 13B 32.5B 65.2B6,30020481–1.4TLlama 218 lipca 2023 6.7B 13B 69B21,000 4096 2TCode Llama24 sierpnia 2023 6.7B 13B 33.7B 69BLlama 318 kwietnia 2024 8B 70.6B100,0008192 15TLlama 3.123 lipca 2024 8B 70.6B 405B440,000128 000Llama 3.225 września 2024 1B 3B 11B 90B128 000Llama 3.37 grudnia 2024 70B128 000Llama 45 kwietnia 2025 109B 400B 2T 71,000 34,000 ? 10M 1M ? 40T 22T ?
Przypisy
Linki zewnętrzne Strona oficjalna Meta Llama – Hugging Face
Kategoria:Duże modele językowe Kategoria:Meta Platforms