První písemná zmínka o zeměpanském špitálu s kaplí svatého Štěpána pochází z roku 1343. Avšak již v roce 1293 je zde zmiňována kaple malomocných. Kaple byla zrušena roku 1782 a špitál byl spojen se sousední vojenskou nemocnicí. Areál špitálu byl zbořen v letech 1909 a 1910.