Hrad, kde príležitostne prebývala moravská vrchnosť, sa počas 17. a 18. storočia premenil v mohutnú vojenskú pevnosť. Roku 1783 bol z rozhodnutia cisára Jozefa II. hrad premenený na civilnú väznicu pre najťažších zločincov a čoskoro tiež pre politických väzňov z krajín celej Habsburskej monarchie. Špilberk mal povesť najtvrdšieho väzenia Európy a medzi najznámejšími väzňami boli talianski karbonári na čele s básnikom Silviom Pellice. Bol tu väznený aj slávny lúpežník Václav Babinský.
Po zrušení väznice v roku 1855 slúžil areál ako kasárne. K svojej niekdajšej funkcii sa objekt vrátil počas oboch svetových vojen, kedy tu boli väznení odporcovia rakúskeho režimu, resp. českí vlastenci v čase nacistickej okupácie.
V roku 1962 bol Špilberk vyhlásený za národnú kultúrnu pamiatku. Okrem toho, že hradby dnes ponúkajú úžasné výhľady na Brno, je tu aj kultúrne centrum. Na Špilberku sídli múzeum mesta Brna, konajú sa tu koncerty, divadelné predstavenia a rôzne festivaly. V areáli sa okrem iného nachádza aj zvonkohra zložená z pätnástich zvonov, rozhľadňa v bočnej veži hradu alebo baroková kaplnka zasvätená najsvätejšej Trojici. Populárnym turistickým cieľom sú tiež kasematy, temné klenuté chodby opradené radom romantických aj hrôzostrašných mýtov.
Po prehliadke hradu sme boli na menšie nákupy v obchodnom centre Galérie Vaňkovky. Spokojné a s novými zážitkami sme sa vrátili naspäť do Třebíča.