Miasto otaczały niegdyś wysokie na około 9 m i szerokie na 2 m mury wzmocnione basztami. Do miasta prowadziły cztery bramy: od strony północnej - Opatowska i Zawichojska, od południowej - Krakowska, zaś od wschodniej - Lubelska. Mury zostały w znacznym stopniu zniszczone podczas potopu szwedzkiego, a na początku XIX w. ze względu na obsuwanie się skarpy zadecydowano o ich rozbiórce. Pozostałością po murach obronnych są – odcinek przy ul. Mickiewicza z Bramą Opatowską, w tym baszta na granicy dawnego szpitala św. Ducha, oraz fragmenty przy ul. Żydowskiej.