How Speeding Up RL Led to Pufferlib (4.8K Stars) | with Joseph Suarez
Deep Learning with Yacine · 65:33 · Watch on YouTube
Joseph Suarez의 주요 주장은 강화학습(RL)이 알고리즘이 막혀서 정체된 것이 아니라, 학계가 새로운 알고리즘과 샘플 효율성을 보상했고 엔지니어링과 속도를 중요하지 않게 취급했기 때문에 정체되었다는 것입니다. PufferLib은 그의 실질적인 답변입니다: 주로 PPO(근위 정책 최적화) 기반의 스택으로, C로 작성된 환경, 공유 메모리 멀티프로세싱 및 대규모 배치를 사용합니다....