Кёлер родился в Скербешеве (тогда назывался Хайденштейн), в районе Генерал-губернаторства оккупированной немцами Польши, как седьмой ребенок Элизабет и Эдуарда Кёлер, в семье бессарабских немцев из Ронани в румынской Бессарабии (около BÄ lÅ # i, современная Молдова).
Он был седьмым ребенком Элизабет и Эдуарда Кёлер. Его семья была бессарабскими немцами из Рецани в румынской Бессарабии (недалеко от Бельгии, современная Молдова).