В 1776 году король Станислав Август подарил Борисовский замок вместе с землёй князю Михаилу Радзивиллу – последнему магнату ВКЛ, который владел этим славным местом. Михаил Радзивилл разместил здесь администрацию и начал перестройку, которую возглавлял борисовский староста Игнатий Огинский. Под его руководством замок превратился в величественную деревянную постройку на высоком каменном фундаменте. В хорошем состоянии он находился до конца 18 века.

После второго раздела Речи Посполитой Борисов отошёл к Российской империи. Императрицей Екатериной II было создано Минское наместничество, в котором Борисов был назван главным городом Борисовского уезда. Еще пять лет город оставался в старостве князей Радзивиллов. В начале 19 века князь Михаил Радзивилл оставил замок и переселился в своё имение в Старо-Борисове.

Замчище — это героическое и славное место, возникшее в конце 13-начале 14 веков. На нём отразилось множество славных событий, ведь оно являлось центром города. Пограничное положение между ВКЛ и Московским государством делало его площадкой для бесконечных войн. От нескольких месяцев до года велись здесь осады. Замок разрушался и оживал снова и снова. Водный и сухопутный торговые пути делали город крупным промышленным центром. Вероятно, поэтому в 16 веке Папе Римскому среди шести наиболее значимых и сильных городов ВКЛ был назван и Борисов.

На протяжении многих веков замок выполнял важную государственную функцию. До 1563 года он являлся центром волости, а после получения Борисовом Магдебургского права в 1557 году становится ещё и центром староства. 10 августа 1565 года город приобрёл и свой герб, утверждённый “Привилегией” Сигизмунда 11 Августа. Герб представлял собой белое (серебряное) поле с городскими воротами с двумя башнями, над которыми помещалось изображение святого Петра с ключом в правой руке. Право города на самоуправление подтверждалось 4 раза: в 1577, 1595, 1640, 1792 годах.

После того, как князь Михаил Радзивилл в 1798 году покинул замок, он ещё несколько лет был местом сбора дворянских собраний. Потом без хозяина начал приходить в упадок. Во второй половине 19 века одна часть замка превратилась в каменную темницу, а на второй была построена роскошная дача господина Энгельфельта, которая по своей внешней красоте и внутреннему убранству комнат, согласно записям исследователя Шпилевского, не уступала летним загородным домам петербургских окрестностей. Эту часть острова называли “волшебном замком”.

Сегодня напоминанием славного прошлого замка служат остатки разрушенных временем стен и табличка с надписью о том, что замок является историко-культурным памятником.