Was hier so einladend ins Filstal hinunter grüßt, war jahrzehntelang dem Verfall und dem Vandalismus preisgegeben. Es ist dem privaten "Förderkreis Schloss Filseck" zu verdanken, dass in dem 400 Jahre alten Renaissancebau wieder Leben eingezogen ist.
Ursprünglich stand hier eine mittelalterliche Burg der Grafen von Aichelberg. Das Schloss, das 1597 erbaut wurde, hat oft seine Besitzer gewechselt.
Als dann 1971 ein Brand erhebliche Teile der Anlage zerstörte, war der Verfall nicht mehr aufzuhalten.
1986 hat der Landkreis Göppingen die „Ruine mit dem Dach“ erworben und mit dem Wiederaufbau begonnen. Nord- und Ostflügel konnten restauriert werden, die abgebrannten Wirtschaftsgebäude wurden durch Neubauten ersetzt.