← back

Phase structure of the Random Language Model

📄 arXiv:2606.28103 · 📥 PDF · 2026-06-26 · cond-mat.stat-mech

Authors: Alessio Giorlandino [arXiv · scholar] , Eric De Giuli [arXiv · scholar] , Sebastian Goldt [arXiv · scholar]

🕰 Orloj analysis

7.8
Total score
8.0
Consistency
7.5
Quality
⭐⭐
AD relevance

Tento článek zkoumá Fázovou strukturu modelu náhodného jazyka (RLM), který modeluje hierarchickou strukturu lidského jazyka pomocí bezkontextových gramatik. Identifikuje hierarchii fázových přechodů v limitu dvojitého škálování, kde se RLM vztahuje k modelu náhodné energie, a vysvětluje vznik strukturovaného textu.

💡 Práce přináší významné teoretické objasnění RLM propojením s modelem náhodné energie a odhalením škálovacích zákonů, což má vysokou hodnotu pro pochopení komplexních systémů a jazykových modelů.

Categories: EMG-3 INF-2 EMG-2 EMG-1

✓ falsifiable, limit_reductions, modest_claims

📄 Abstract

Context-free grammars are minimal models of hierarchical structure in human language, generating structured text from recursive production rules. The Random Language Model (RLM) [De Giuli, PRL 2019], an ensemble of such grammars with random rule weights, exhibits a cross-over from gibberish-like output to structured text as a function of a "temperature", but the location and nature of this transition remained unclear. Here, we show that the RLM exhibits a hierarchy of phase transitions in a double-scaling limit where the grammar temperature $\tildeε_d \to 0$ and the number of hidden symbols $N \to \infty$ at fixed $x = \tildeε_d \log N$. By identifying the relation between RLM and the Random Energy Model, we identify a series of transitions where correlations between symbols emerge, single-symbol marginals become non-uniform, and rule use freezes in a glassy phase. A semi-annealed approximation yields nontrivial scaling laws for rule usage, entropy, and energy, consistent with Heaps' law and context-length scaling observed in large language models.

📄 arXiv abstract page 📥 PDF