PPO


### Proximal Policy Optimization
balance between ease of implementation, sample complexity, and tuning
2017년 OpenAI에서 개발된 모델 없는 강화 학습 알고리즘
태-동작 쌍에 값을 할당하는 대신 정책 공간을 검색
data를 만들어낸 old policy와 train 대상이 되는 현재의 network의 new policy를 구분

[PPO2](https://texonom.com/ppo2-378944bb3b8848a185c20fc529c390d2)





> [Proximal Policy Optimization Algorithms](https://arxiv.org/abs/1707.06347)

> [Proximal Policy Optimization](https://openai.com/research/openai-baselines-ppo)






