Замковая гора значительно больше Девичьей. Некогда ее окружали глубокие рвы, а за ними протянулся высокий вал. За укреплениями на верхней площадке горы размещался детинец средневекового Мстиславля. С юга к нему примыкал так называемый Окольный город, также окруженный валами и рвом. При раскопках древнего Мстиславля (Л. Алексеев) обнаружены остатки укреплений, хоромы с изразцовыми печками и др. Ниже детинца (Замка) обнаружен посад Мстиславля с остатками деревянных построек, улицами, мощенными бревнами, многочисленными предметами быта XII—XIII вв.