1820. aastatel teenis ta Kaukaasias ja osales sõdades Türgi ja Pärsia vastu. Ta mängis silmapaistvat rolli Erivani vallutamisel.
, Pärsia kontrolli all olev Armeenia linn, aastal 1827 Vene-Pärsia sõja ajal (1826-1828) ja tõsteti 1829. aastal kindralleitnant. Pärast sõda asus Bagration Tiflisesse, kus tema mõis külastas kohalikku eliiti ja kus 1831. aastal toimus esimene avalik esitlus Alexander Griboyedovi näidendist "Woe from Wit", kus Bagration mängis kolonel Skalozubit.