Lorsque Newton a trois ans, sa mère se remarie et va vivre avec son nouveau mari, le révérend Barnabus Smith, laissant son fils aux soins de sa grand-mère maternelle, Margery Ayscough.
Quand Isaac fut trois fois sa mère remariée, et Isaac demeura avec sa grand-mère.