Интересный результат.

Интересный результат. Зацикленные модели и модели с постепенным наращиванием через копирование слоёв во время обучения бьют dense модели в неожиданном месте — они лучше выучивают in-context learning. How Depth Growth and Looping Shape In-Context Learning in Language Models Ferdinand Kapl, Kaitlin Maile, Stefan Bauer, Johannes von Oswald Paper: https://arxiv.org/abs/2610.31421 Review…