Im Jahre 1937 richteten die Oelsnitzer Heimatfreunde und der Wanderverein in den sechs Räumen des 1. Stockwerkes der Kernburg ein Heimatmuseum ein, das aber 1945 geräumt werden musste, da das Schloss bis 1951 als Flüchtlings- und Durchgangslager diente.