#### Haqiqiy dunyo traektoriyalarini to'plash bilan bog'liq muammolar Haqiqiy dunyodagi ko'plab vazifalar uchun tasodifiy harakatlarni amalga oshiradigan siyosatdan boshlab traektoriyalarni to'plash juda ko'p vaqt talab etadigan, qimmat va xavfli bo'lishi mumkin. Buni engillashtirishning bir nechta mumkin bo'lgan usullari quyidagilardan iborat: siyosatingizni qo'lda ishlab chiqarilgan simulyatsiyada o'qitish, masalan, qog'ozda _Rubik kubini robot qo'li bilan hal qilish_, haqiqiy dunyo traektoriyalaridan dunyo modelini o'rganish, keyin o'rganilgan modelda modelsiz RLni ishlatish, o'rganish tezligini sizning jismoniy robotingiz harakat qilishi mumkin bo'lgan tezlikdan ajratib olish, masalan, qog'ozda _DayDreamer: Jahon modellari
spam fails_task lang_mismatch pii not_appropriate hate_speech sexual_content quality toxicity humor helpfulness creativity violence