דויל היה אב לחמישה ילדים. היו לו שניים עם אשתו הראשונה: מרי לואיז (1889-1976) וארתור אלני קינגסלי (1892-1918). היו לו שלושה ילדים נוספים עם אשתו השנייה: דניס פרסי סטיוארט (1909-1955), בעלו של ג'ורג'יאן פרסיס, נסיכה נינה מלוויני; אנה דויל נפטרה בשנת 1912; אנה דויל נפטרה בשנת 1990; אנה דויל נפטרה בשנת 1990; אנה דויל נפטרה בשנת 1990; אנה דויל נפטרה בשנת 1990; אנה דויל נפטרה בשנת 2010; אנה דויל נפטרה בשנת 2011; אנה דויל נפטרה בשנת 2012; אנה דויל נפטרה בשנת 2012; אנה דויל נפטרה בשנת 2012; אנה דויל נפטרה בשנת 2012; אנה דויל נפטרה בשנת 2012; אנה דויל נפטרה בשנת 2012; אנה דויל נפטרה בשנת 2012; אנה דויל נפטרה בשנת 2012; אנה דוי
שנת 1997