Pro účely františkánského kláštera byly upraveny a barokní přestavbou propojeny dva původně samostatné renesanční domy na Palackého náměstí. Dnes jsou památkově chráněné. V bývalém refektáři se nacházejí vzácné nástěnné malby.

Součástí stavby původně zamýšleného kláštera, který měl tyto domy nahradit, měla být i loreta, která dnes stojí samostatně na Palackého náměstí vedle kostela Nejsvětější Trojice.