Сверхпроводящий нейрон: новый шаг к энергоэффективным вычислениям

Ученые разработали программируемый сверхпроводящий нейрон, способный к вычислениям непосредственно в памяти и адаптации к сигналам в двух временных масштабах.

Долгая память нейросетей: как сохранить контекст без потерь

Для оптимизации обработки длинных последовательностей, система предварительно загружает фрагменты контекста, используя локальные RoPE, а затем, при выводе, восстанавливает глобальные позиции RoPE и применяет нормализацию внимания, чтобы выделить наиболее важные токены для пересчета KV-состояний с полным контекстом; полученные KV-состояния объединяются с кэшированными фрагментами, восстанавливая взаимодействия между ними, причём дополнительная перестановка фрагментов позволяет разместить наиболее информативные ближе к запросу.

Новое исследование предлагает эффективный способ обработки длинных последовательностей данных в задачах генерации, позволяя нейросетям лучше понимать и запоминать информацию.

Сверхпроводимость в ультратонких плёнках MoTe₂: новый взгляд на механизм спаривания

Исследование показывает, что сверхпроводимость в двумерном дисульфиде молибдена (MoTe₂) может быть объяснена традиционным s(++)-волновым спариванием, особенно в области, обогащенной дырками.

Квантовый скачок: О будущем химии и ИИ

Квантовый скачок: О будущем химии и ИИ Забавно, как мы всегда ищем способы ускорить процессы, обмануть природу. Но что, если ключ к ускорению лежит не в грубой силе, а в тонком понимании её правил? Вот и ученые предлагают использовать квантовые компьютеры для обучения искусственного интеллекта, чтобы тот моделировал химические системы. Это как дать ИИ возможность … Читать далее

Поиск без границ: модульная платформа для интеллектуального поиска

Ключевые состояния хранимых данных SearchGym демонстрируют, как система организует и поддерживает информацию для эффективного поиска, обеспечивая основу для адаптации и оптимизации стратегий исследования.

Новая инфраструктура SearchGym позволяет создавать и оценивать гибридные системы поиска, объединяя различные подходы для достижения оптимального результата.

Сжатие признаков нейросетей: новый подход к экономии ресурсов

Мягкая квантизация ([latex]Q^s[/latex]) и побитовая мягкая квантизация ([latex]Q^{bw,s}[latex]) формируются посредством суммирования или конкатенации нескольких мягких ступенчатых функций, что обеспечивает их дифференцируемость по отношению к порогам и, следовательно, возможность оптимизации в процессе обучения, после чего, на этапе инференса, происходит преобразование в жёсткую квантизацию ([latex]Q[/latex]) и побитовую квантизацию ([latex]Q^{bw}[/latex]) посредством округления.

Исследователи предлагают инновационный метод сжатия входных данных для нейронных сетей, позволяющий значительно снизить энергопотребление и вычислительные затраты.

Квантовая жидкость в полупроводнике: обнаружена сверхпроводимость в GaAs

В многослойных образцах, исследуемых с помощью мульти-затворов, подтверждено образование конденсата коллективных возбуждений и равномерное накопление заряда, при этом система, находящаяся в условиях большого канонического ансамбля, эффективно поглощает избыточные потоки благодаря снижению кулоновского потенциала, что позволяет сохранять конденсированное состояние и поддерживать минимальную энергию системы, о чем свидетельствует квантованное поведение плотности накопленного заряда [latex]\eta\_{\text{a}}[/latex] на различных затворах.

Новое исследование демонстрирует проявление сверхтекучести и эффекта Мейснера в системе квантового эффекта Холла на основе арсенида галлия, открывая уникальные возможности для изучения квантовых явлений.

Микрогребень и закрученные волны: новый взгляд на перспективное зондирование

Исследователи представили компактную систему для высокоточного зондирования, использующую интегрированный микрогребень для генерации широкополосных закрученных электромагнитных волн.