yandex / AliceAI-Foundation-80B-A3B-Base

Text Generation81B3.1K405Updated Nov 3, 2026

Downloads

3.1K

Likes

405

Last updated

Nov 3, 2026

License

apache-2.0

AliceAI-Foundation-80B-A3B-Base – базовая языковая модель с гибридной архитектурой и MoE-слоями. Модель содержит 80 млрд параметров, из которых для каждого токена активируются 3 млрд, и поддерживает контекст длиной до 262 144 токенов. Модель была обучена полностью с нуля.

Tasks & library

  • text generation
  • transformers

Tags

  • transformers
  • alice_ai
  • text-generation
  • custom_code
  • mixture-of-experts
  • vllm

Technical specifications

Parameters81B
Librarytransformers
Languagesru, en
Licenseapache-2.0