1932. aastal liitus ta Stormtroopers (SA, mida tavaliselt nimetatakse pruunist särgid), ja järgmisel aastal, tema noorem vend Christoph liitus Schutzstaffel (SS). Hiljem, tema kaks teist venda, sealhulgas Wolfgang, samuti liitus SA. Läbi tema partei liikmesus, Philipp sai eriti lähedane sõber Hermann Göring, tulevane pea Saksa õhujõudude (Luftwaffe). Stormtroopers, ta oli ametis Obergruppenführer. Pärast ametisse nimetamist Saksa kantsler 30. jaanuaril 1933, nimetati Philipp Oberpräsident (Gernpräsident) Saksamaa tööliste partei.
Ta tutvustas NSDAPi ametnikele teisi aristokraate.