Mezi ohrožené památky patří v Brandýse nad Orlicí také zámek. Po zborcení stropů ho ministerstvo školství nehodlá rekonstruovat a dále v něm provozovat činnost školského zařízení.