Sy moeder, Isabel Fenton, van 'n familie wat gely het in verband met die Stuart-opstand, het besluit dat hy 'n eersteklas opvoeding moet ontvang, en het hom eers na die parochieskool en toe na die Montrose-akademie gestuur, waar hy tot die ongewone ouderdom van sewentien en 'n half gebly het. Hy het toe die Universiteit van Edinburgh betree, waar hy hom as 'n Griekse geleerde onderskei het. In Oktober 1789 is hy as 'n predikant van die Kerk van Skotland georden, maar het hy met min sukses teëgekom. Volgens John Stuart Mill se Outobiografie van sy vader, hoewel hy "opgelei is in die skoot van Scotch, deur 'n skootmaker en 'n klein boer, die seun van James Milne, 'n skootmaker en 'n klein boer. Sy moeder, Isabel Fenton, van 'n familie wat gely het in verband met die Stuart-opstand, het besluit dat hy 'n eersteklas opvoeding moet ontvang, en hom eers na die parochiese skool en dan na die Montrose-
Meul