
Astera Labs обновляет контроллеры памяти Leo: помощь ИИ-центрам в борьбе с дефицитом памяти
Astera Labs представила обновлённую линейку контроллеров памяти Leo и коммутаторов Scorpio — они должны помочь дата-центрам справиться с нехваткой...
Все материалы с тегом «инференс».

Astera Labs представила обновлённую линейку контроллеров памяти Leo и коммутаторов Scorpio — они должны помочь дата-центрам справиться с нехваткой...

Исследователи предложили математическую модель SARA, которая помогает оптимально распределять вычислительные ресурсы между компонентами...

Научная работа на arXiv анализирует эволюцию инференса больших языковых моделей от оптимизации внутри отдельного движка к сложной проблеме...

Обзор ключевых обновлений в мире AI-разработки: новая модель OpenAI, стабильный фреймворк для Kotlin-агентов, управляемые разрешения в Copilot и...

Новый метод DiffLUT-Net позволяет обучать нейросети напрямую на программируемых чипах FPGA, превращая их в компактные аппаратные блоки без...

GitHub-проект Waste обходит проблему нехватки оперативной памяти при работе с моделями на триллионы параметров — веса подгружаются «на лету» с...

Ollama — отличная точка входа для запуска языковых моделей на своём железе, но при росте нагрузки её простота превращается в ограничение....

Израильский стартап Majestic Labs представил сервер Prometheus на базе Arm-процессоров и до 128 ТБ LPDDR6-памяти, который, по заявлению...

OpenAI резко снизила стоимость моделей GPT-5.6 Luna и Terra, вписав их в нижний ценовой сегмент и ужесточив конкуренцию с Google и Anthropic за...