Von diesen erwarb zwischen 1744 und 1762 Friedrich Ferdinand (seit 1746 Freiherr) von Scharffenstein genannt Pfeil (1718–1795) das Schloss; möglicherweise kurz nach dem Tod des letzten von Diepental (1751).