Aus den Käufen bildeten Jakob von Kaltental zu Mühlhausen am Neckar die Herrschaft Osterzell, die neben Hirschzell auch Tremmelschwang und Osterzell umfasste und vom letzten Freiherrn von Kaltental anno 1699 an das Kloster Rottenbuch verkauft wurde.