Ta abiellus aastal 1584 Sybilla Creliniga, kellega tal oli kuus poega ja üks tütar. Nende pojad Alexander (1587-1661), Vincent (1595-1675) ja Niclaes (1598-1658) said vastavalt surnukujundite, lahingukujundite ja portreejundite maalijateks. Enne Antwerpeni langemist
, Emmanuel oli tõenäoliselt kalvinist, kuna tema esimene poeg ristiti katolikuga pärast Antwerpeni langust. Ta oli pärast Antwerpeni langust Antwerpeni kodanikukaardi "puhastuse andmetes" registreeritud katoliiklasena. Tema rikkus ja head sidemed Antwerpeni ühiskonna kõrgemate ringkondadega võisid teda kaitsta. Emmanuel määrati hiljem linnavalvurite kapteniks, mis oli tema jaoks korrapärane sissetulek. Aastal 1595 osales ta Hollandi vabariigi vägede poolt okupeeritud naaberlinna Lieri vabastamises.