Nach Adalberts Tod (1257) ohne Nachkommen konnte neben Hartmann V., Bischof von Augsburg, und dessen Schwagern auch Ulrich Erbansprüche stellen und einige Dillingische Positionen wie die Vogtei über Ulm übernehmen.