Spolu s klášterem založen do poloviny 14. stol., pravděpodobně za Zdeňka z Lipé 1349 – 1355. Povolení ke stavbě vydal papež v Avignonu 2.2.1354 pro řád Augustiniánů. Chrám byl součástí komplexu klášterních budov a tehdy hlavní chrámová loď dosahovala délky 53 m. Roku 1423 v době husitských válek byl klášter opuštěn a stavby pobořeny. Řeholníci se do něj vrátili až r. 1450, definitivně jej však opustili r. 1500. R. 1634 kníže Gundakar z Lichtenštejna koupil pobořený klášter za tisíc zlatých a opravený jej odevzdal Piaristům, kteří zde vedli latinskou školu. 1658 připadl komplex Paulánům. Při požáru města 1682 klášter i chrám vyhořel. V r. 1701 byly obě stavby obnoveny v barokním slohu, kostel byl vystavěn nižší a menší. Zbytky gotické klenby a gotických oken jsou patrny na půdě kostela. R. 1786 za Josefa II. byl klášter zrušen.
Dnes je klášter sídlem městského úřadu. Opravena vnitřní klášterní (rajská) zahrada slouží jako prostor pro koncerty, svatební obřady a jiné sváteční události.