U severozapadnom delu Gornjeg grada sačuvani su ostaci zamka despota Stefana Lazarevića. Citadela ili unutrašnji grad nastala je prvobitno kao vizantijski kastel u XII veku. Ponovo je kompletno izgrađena za vreme despota Stefana Lazarevića 1404–1427. godine. Arheološkim istraživanjima koja su vršena sistematski do 1980. godine otkriveni su ostaci bedema s kulama, kaldrmisani prilaz zamku sa severoistočne strane, sa okruglim stubovima na koje se nekad oslanjao pokretni most.

Pronađeni su ostaci oružja, kamena đulad, ostaci keramike, novca i drugih predmeta iz despotovog i iz kasnijih vremena. U austrijsko-turskim borbama krajem XVII veka zamak despota Stefana Lazarevića gotovo je u potpunosti uništen