Обычно метод групповой относительной оптимизации политики (GRPO) награждает ИИ за безопасные ответы, сравнивая их с другими вариантами и поощряя более надёжные формулировки.