OpenRL

Google представила OpenRL — экспериментальный API с открытым исходным кодом, который должен упростить одну из самых сложных задач современной разработки искусственного интеллекта: постобучение и тонкую настройку больших языковых моделей (LLM), пояснили xrust. Новый проект позволяет запускать процессы обучения на собственной инфраструктуре Kubernetes, отделяя исследовательскую работу от управления вычислительными ресурсами. Сегодня создание современных ИИ-моделей уже не ограничивается их первоначальным обучением. После выпуска базовой версии разработчики продолжают улучшать качество ответов, адаптируют модели под специализированные задачи и обучают их новым сценариям взаимодействия. Именно этот этап — post-training — считается одним из наиболее ресурсоемких и сложных. Что предлагает OpenRL Разработчики Google создали OpenRL как универсальный API, который берет на себя управление инфраструктурой обучения. Исследователям больше не нужно вручную координировать вычислительные узлы или