Physical Neural Networks Need Nonlinearity, Amplification, and Suppression for Learning
📄 arXiv:2606.26989 · 📥 PDF · 2026-06-25 · cond-mat.dis-nn
Authors: Nex Chiaki Xijana Stuhlmüller [arXiv · scholar] , Marjolein Dijkstra [arXiv · scholar]
🕰 Orloj analysis
Tento článek zkoumá fyzikální neuronové sítě a tvrdí, že pro efektivní učení potřebují kromě nelinearity také zesílení a potlačení signálu. Autoři představují fyzicky realizovatelné návrhy obvodů, které tyto klíčové vlastnosti zahrnují, a objasňují omezení lineárních fyzikálních sítí.
💡 Práce přináší praktické poznatky pro návrh energeticky účinných fyzikálních výpočetních systémů, zdůrazňující nutnost komplexnějších nelineárních prvků.
✓ falsifiable, modest_claims, limit_reductions_implied
⚠ lack_of_code_availability_mention, simulation_details_not_specified
📄 Abstract
The exponential growth in energy consumption of artificial intelligence systems has spurred interest in physical computing paradigms that exploit the relaxation of physical systems toward steady states. However, many existing physical networks are fundamentally linear and incapable of performing nonlinear operations crucial for meaningful machine learning tasks. Here we use simulations to show that nonlinearity alone is insufficient; physical learning systems must also support signal amplification and suppression to perform nontrivial computations. We present physically plausible circuit designs that incorporate these essential features, enabling effective nonlinear information processing. Our findings clarify the limitations of linear physical networks and provide guidance for developing energy-efficient physical learning architectures capable of general machine learning tasks.