Danh nhân khoa bảng Nam Định từng được phong Lưỡng quốc trạng nguyên
Giáo sư Phan Huy Lê sinh ra trong một gia đình thuộc dòng họ khoa bảng nổi tiếng với những danh nhân văn hóa lớn như Phan Huy Cẩn, Phan Huy Ích, Phan Huy Thực, Phan Huy Vịnh, Phan Huy Chú, Cao Xuân Dục, Cao Xuân Tiếu, Cao Xuân Huy... Cha của giáo sư là Phan Huy Tùng là một tiến sĩ Nho học ông từng đỗ Hội nguyên và Tam giáp đồng tiến sĩ khoa Quý Sửu vào năm 1913, cha của ông từng nổi tiếng là một vị quan thanh liêm, phúc đức, nhân hậu, hết mực yêu con, quý cháu. Mẹ ông là người dòng họ Cao Xuân giàu truyền thống khoa bảng với các danh nhân như Cao Xuân Dục, Cao Xuân Tiếu, Cao Xuân Huy.