Lui et sa troisième épouse, Tomoko, ont un fils, Ken, un chanteur et chef d'orchestre classique.
Il vit maintenant avec sa troisième épouse, Tomoko, qui a un fils, Ken, qui est aussi devenu chef d'orchestre.