In 1932 het hy by die Stormtroopers (SA, algemeen na verwys as die Bruin Hemde), en die volgende jaar het sy jonger broer Christoph by die Schutzstaffel (SS) aangesluit. Later het sy twee ander broers, insluitend Wolfgang, ook by die SA aangesluit. Deur sy partylidmaatskap het Philipp 'n besonder goeie vriend geword van Hermann Göring, die toekomstige hoof van die Duitse lugmag (Luftwaffe). In die Stormtroopers het hy die rang van Obergruppenführer beklee. Na die aanstelling van Adolf as die Duitse kanselier op 30 Januarie 1933 is hy aangestel as Oberpräsident (Governor) van die Nasionale Sosialistiese Duitse Arbeidersparty.
Hy het ander aristokrate aan NSDAP-amptenare voorgestel