Nested Learning: Google решает проблему катастрофического забывания в AI
Google Research представила Nested Learning — новую парадигму машинного обучения, которая рассматривает модели как систему вложенных задач оптимизации разных уровней. Это концептуальный прорыв: впервые архитектура и алгоритм обучения объединены в единую структуру, что позволяет решить фундаментальную проблему современных больших языковых моделей — катастрофическое забывание при обучении на новых данных. 🎯Три ключевых вывода