LLM с бесконечными параметрами: статья на arXiv предлагает генерацию весов из живых данных
Independent researchers
Препринт на arXiv (2609.18842, 16 сентября; 122 балла на HN) предлагает вдохновлённую MoE архитектуру, где компактная гиперсеть превращает рантайм-данные в низкоранговую модуляцию общей базовой сети, поддерживая байесовское убеждение над латентным кодом, обновляемое онлайн, — так веса постоянно пересчитываются из эволюционирующего убеждения, а фиксированный объём параметров остаётся мал.
Почему это важно
Ещё одна попытка вынести рантайм-адаптацию из контекста в параметры — напрямую актуально для долгих агентных сессий, перечитывающих горы фактов каждый ход.
Важность: 2/5
Заметный исследовательский препринт, 2 подтверждения