Areál gotické tvrze a bývalého kláštera voršilek se nalézají v centru města. Tvrz byla založena asi ve 13. století. V roce 1393 ji získal Jetřich z Janovic a připojil ji k náchodskému panství, ke kterému patřila až do konce období feudalismu. Tvrz byla postavena do čtverhranu, na třech stranách byla chráněna dvěma příkopy, na čtvrté straně ji chránil sráz k řece. Tvrziště bylo asi 11 m dlouhé a 5 m široké. Příkopy byly z obou stran vyzděné.V průběhu 16. století tvrz zanikla, v nedávné době byly odkryty základy tvrze a valeně klenuté sklepy. Klášter byl založen v 18. století, později byl přestavěn a v letech 1980 - 90 byl rekonstruován pro muzejní účely.