Von den nun rückwärtig liegenden Abschnitten der römisch-frühmittelalterlichen Mauer gibt es nur wenige Zeugnisse, da deren Abbruchmaterial an anderer Stelle wieder verbaut wurde.
Dieser richtete im Schloss zunächst eine Lederei ein, begann aber ab dem Jahr 1866 das Schlossgebäude zu demolieren und das Abbruchmaterial zu verkaufen.