Что нового в ИИ

Курируемая лента: модели, инструменты, релизы, исследования и практика.

Open source 4 дн назад

Mistral выпустила Mixtral 8x22B — MoE-модель с открытыми весами

Смесь экспертов даёт качество уровня крупных моделей при меньшей стоимости инференса.

Читать подробнее
MoE-архитектура активирует только часть параметров на каждый токен, что снижает нагрузку на GPU. Mixtral хорошо показывает себя в коде и многоязычных задачах.
Источник: Mistral AI #mistral #mixtral #moe
Трей
Откройте любое мини-приложение — оно появится здесь.