CartPole

CartPole — проект, с которого стартовала работа группы, как классической задачи управления. Есть каретка, движущаяся вдоль горизонтальной направляющей, к ней крепится свободно подвешенный маятник в виде металлического стрежня. Управляя только ускорением каретки необходимо перевести маятник в верхнее неустойчивое положение равновесия и там удерживать. В данный момент мы активно работаем над линейной и радиальной версиями устройства. Главное цель проекта – иметь тестовый полигон для обактки алгоритмов отптимального управления и RL обучения моделей, способных управлять сложными динамическими системами. Подробнее о нашем опыте разработки можно почитать здесь.