Im November 1683, einige Monate nach dem Tod seines Großvaters, kam Ashley auf das Winchester College, wo er jedoch keine guten Erfahrungen machte. 1686 verließ er die Schule, um eine erzieherische Auslandsreise zu unternehmen.