Оның ата-бабалары Нормандиядан шыққан, Англияға Вильгельм Жаулап алушымен бірге келген және Гастингс шайқасынан кейін сакстардан алынған бай поместьелермен марапатталған. Бастапқы аты Байронов  Бурунь. Бұл есім орта ғасырлардағы ерлік жылнамаларында жиі кездеседі. Бұл тұқымның бір ұрпағы Генрих II кезінде өз тегін Байронға өзгерткен. Байронның билігі, әсіресе, Генрих VIII кезінде жоғары болды, ол католик монастырларын жою кезінде сэр Байронға үлкен сакаллы кішкентай Джон (sir John the little with the Great Beard) деген лақаппен Ноттингем графтығындағы бай Ньюстед аббатшылығының иеліктерін берді.
Қай патшаның тұсында фамилиясы Байронға өзгертілді?
Генрих II кезінде