Albert was die enigste seun van Otto, graaf van Ballenstedt, en Eilika, dogter van Magnus Billung, hertog van Sakse. Hy het in 1123 die waardevolle lande in Noord-Sakse van sy vader geërf, en by sy moeder se dood, in 1142, het hy die helfte van die lande van die huis van Billung geërf. Albert was 'n lojale vasal van sy familielid, Lothar I, hertog van Sakse, van wie hy omstreeks 1123 die Markgrafskap Lusatië, na die ooste, ontvang het; nadat Lothar koning van die Duitsers geword het, het hy hom vergesel op 'n rampspoedige ekspedisie na Bohemië teen die opkoms, Soběslav I, hertog van Bohemië in 1126 by die Slag van Kulm, waar hy 'n kort gevangenisstraf gely het.
Otto