
Dominikánský klášter byl v těchto místech (jižně od dnešního kostela) vybudován těsně po opevnění města ve 13. století. Jeho budova na skále nad řekou byla do městského opevnění začleněna. 20. srpna 1419 byl klášter vypleněn místními husity, mniši byli shozeni ze skály, budovy byly pobořeny a vypáleny. Z původní stavby se zachovalo obvodové zdivo presbytáře kostela. Na místě kláštera vyrostlo několik domů, zbytky klášterního kostela byly využity jako solnice. Z té doby pochází průčelí s renesančními sgrafity. V době rekatolizace byl klášter obnoven, nový konvent byl vystavěn na opačné straně – směrem k hradu. Kostel byl obnoven M. Huertym v roce 1636. Věž byla přistavěna roku 1641. Za válek o rakouské dědictví v roce 1741–42 zde francouzská armáda zřídila lazaret. V roce 1780 byl klášter zrušen a budova byla upravena pro soud a věznici.