ИИ-модели можно ускорить вдвое — просто глянув на их веса
Новый метод Magnitude Profile Pruning позволяет удалять лишние «головы внимания» из трансформер-моделей без калибровки и обучения — достаточно проанализировать числовые значения весов.

Новый метод Magnitude Profile Pruning позволяет удалять лишние «головы внимания» из трансформер-моделей без калибровки и обучения — достаточно проанализировать числовые значения весов.


Исследователь Карлос Бенитес показал, как квантовый алгоритм QAOA на реальном чипе IBM способен подбирать цепочки «гаджетов» для атак на...
Марина Долева · · 6 мин
Исследователи сравнили два типа нейросетевых приёмников для цифровой связи и выяснили, что архитектура KAN воспроизводит ожидаемое...
Илья Ращупкин · · 4 мин
Исследователи представили архитектуру LUNA, объединяющую функции MIMO-массива и управляемого ретранслятора на единой платформе с линзой...
Пётр Ким · · 6 мин
Научная работа на arXiv анализирует эволюцию инференса больших языковых моделей от оптимизации внутри отдельного движка к сложной...
Пётр Ким · · 5 мин
Исследователи представили MIAR — фреймворк для повышения разрешения медицинских изображений, который обходит классические дилеммы между...
Редакция · · 4 мин
Обновлённый Asus ROG Zephyrus G16 получил более яркий экран, улучшенный шарнир и заметно возросшую автономность, но при этом сохранил...
Редакция · · 6 мин