 Kọkọ parí ọrọ tó wà nísàlẹ yìí: Ìlú Tiflis ni wọn ti bí Brusilov Tbilisi, Georgia báyìí. Bàbá rẹ Aleksi Nikolaevich Brusilov jẹ ọmọ ilẹ Rọṣíà, ìyá rẹ Anna Luiza Niestojemska sì jẹ ọmọ ilẹ Poland. Ìran mẹta lára ìdílé Brusilov ló ti sìn gẹgẹ bí òṣìṣẹ nínú ẹgbẹ ọmọ ogun ọba, bàbá bàbá wọn sì ń jà fún ìjọba Nápólò : ìkọlù ọdún 1812. Bàbá rẹ di ọgágun ọgágun kí ó tó kú nítorí àrùn ikọ ẹgbẹ ní 1856. Kò pẹ lẹyìn náà ni ìyá Brusilov kú, àwọn ẹbí tó wà ní Kutaisi ló sì tọ ọ dàgbà. 