Władysław Komar sündis 11. aprillil 1940 Leedus Kaunas Władysław Komar-Zabożyński ja Wanda Jasińska lapsena. Poola aadlikuna oli neil Rogówekis mõis (liituuna keeles Raguvėlė). Mõlemad tema vanemad olid sportlased <unk> isa võistles Leedu eest 1934. aasta Euroopa kergejõustikumängudel Vladas Komarasina
kõrgete hüppude ja 110 meetri tõkked, ema oli shot putter, kes seadis riikliku rekordi 1930. aastate alguses. Teise maailmasõja ajal kolis pere Gulbinisse. Tema isa, kes aitas sõja ajal Poola saksavastast vastupanuliikumist, koduarmee, mõrvati 1944. aastal Glitiškės'is Ypatingasis būrys'i militside rühma poolt.