В течение многих лет он был самым выдающимся из ныне живущих членов семьи Кеннеди, он был последним выжившим сыном Джозефа П. Кеннеди-старшего; младший брат президента Джона Ф. Кеннеди и сенатора Роберта Ф. Кеннеди, оба жертвы убийства, и Джозефа П. Кеннеди-младшего, погибших в бою во время Второй мировой войны; и отец конгрессмена Патрика Дж. Кеннеди.
Он был младшим сыном Джозефа П. Кеннеди-старшего и Роуз Фицджеральд Кеннеди. Он был младшим братом бывшего президента Джона Ф. Кеннеди и сенатора Роберта Ф. Кеннеди, оба из которых были убиты, а также Джо Кеннеди, убитого во время Второй мировой войны.