Активує лише 5,1 млрд параметрів, нова модель Ant 11 тестів перевищила трильйонний флагман

Новини ME: повідомлення від 24 липня (UTC+8). Згідно з моніторингом Beating від iData, Antyi Bai Ling (Inclusion AI) випустила Ling-3.0-flash. Модель має 124 млрд параметрів, але активованих — лише 51 млрд. За офіційно опублікованим порівнянням, у 12 тестових бенчмарках вона перевершує Ling-2.6-1T у 11 з них, а активовані параметри становлять лише близько дванадцятої частини цього тисячемільярдного флагмана. З архітектурної точки зору вона поєднує Kimi Delta Attention і шари уваги MLA у співвідношенні 5:1, щоб посилити пам’ять для довгих текстів. Модель нативно підтримує контекст 256K і може бути розширена максимум до 1 млн. Ling-3.0-flash уже доступна через API Antyi Bai Ling та OpenRouter і підтримує два режими: мислення (thinking) і немислення (non-thinking). Наразі ваги моделі ще не відкриті, а порівняння продуктивності здебільшого базується на тестах від Antyi; все ще потрібна перевірка незалежними сторонніми оцінками. (Джерело: BlockBeats)
Переглянути оригінал
Ця сторінка може містити контент третіх осіб, який надається виключно в інформаційних цілях (не в якості запевнень/гарантій) і не повинен розглядатися як схвалення його поглядів компанією Gate, а також як фінансова або професійна консультація. Див. Застереження для отримання детальної інформації.
  • Нагородити
  • Прокоментувати
  • Репост
  • Поділіться
Прокоментувати
Додати коментар
Додати коментар
Немає коментарів
  • Закріплено