Интеграция дескриптора в алгоритм PPO

У меня имеется написанный алгоритм PPO - док прикрепил В этот алгоритм нужно интегрировать дескриптор. Описание того, что нужно сделать в прикрепленном файле Дескриптор