Достопримечательностью Гольшан является дворцово-замковый ансамбль, рас­по­ло­жен­ный за пределами деревни на продолжении ул. Замковой (бывшей Советской). Он построен в первой половине XVII в. как резиденция князя П. Сапеги. В прошлом замок окружен валами и рвами, которые заполнялись водами реки Гольшанки. Такая фортификационная система обводнения объекта была широко распространена в Беларуси и Литве в XVI—XVII вв. Остатки валов сохранились до сих пор, рвы осушены.

Замок (позже — дворец) сильно пострадал во время двух последних войн и требует серьезной реставрации. Но даже в современном состоянии он оставляет впечатление своими размерами, башенными укреплениями, протяженными стенами. Гольшанский дворец в своем построении отдельно напоминает Мирский замок. Как и там, по углам высятся башни, а по периметру стен, примыкая к ним, располагаются двухэтажные жилые корпуса, образующие замкнутый внутренний двор (60х60 м). Под корпусами имеются обширные подвалы, перекрытые сводами. Стены по этажам прорезаны большими окнами, обычными для дворцовых резиденций. Башен 6 (4 — по углам, 2 — по середине корпусов).

Интерьеры памятника погибли. Прослеживаются остатки каплицы — часовни, врезанной в середину одного из корпусов, каминов, лестниц и др. Сохранилась арка-брама напротив часовни по оси двора — единственный въезд во двор дворца. Справа от брамы размещались лучшие помещения дворца, большой зал под сводами. Во внутренней отделке были широко использованы орнаментики из стукко (остатки сохранились).