Мальовничо розташований на озері Сєсікі , замок, а точніше шато , є прикладом ренесансної резиденції, яка , хоч і не виконувала більше суто оборонних функцій, все ж використовувала архітектурну мову середньовічних фортець . У такий спосіб будівля підкреслювала лицарський характер своїх власників, Даумонтів-Сєсіцьких , які, за сімейною легендою, походили від литовського князя Гедимінаса.

Про мальовничий замок, чи то пак шато, в Сєсіках досі не написано жодного наукового дослідження , але автори історичних романів полюбляють розгортати дію в його стінах, прикладом чого є "Емілія Плятер" Вацлава Ґонсьоровського. Сам замок, з особливим шармом його товстих і приземкуватих стін, обріс легендами , а в різноманітних путівниках про нього можна знайти чимало неправдоподібних історій. Перш за все, слід зазначити, що невеликий оборонний пункт мав існувати на цьому місці ще в 15 столітті. за часів короля Владислава Варненчика (1434-1444), старшого сина Владислава Ягайла. У той час дерев'яно-земляна споруда належала Даумонтові (Даумунтові ), "герцогові Уцанському". Вона слугувала не лише сторожовою вежею, але й відправною точкою для полювання в навколишніх, тоді ще густих литовських лісах.

На початку 16 століття власником маєтку Сєсіки став нащадок Даумонтів - Габріель Даумонт , який до 1517 року побудував на березі озера обнесену стіною резиденцію . Він та його наступники називалися Даумонт-Сесіцькі гербу Бавола-Голова від назви села. Вони були активними учасниками політичного життя на Вілкомірщині, але не набули великого значення. Найвидатнішим їхнім представником був Казимир Владислав (пом. 1691 р.) - маршалок Литовського трибуналу в 1676 р. і великий магістр литовський, електор Яна III Собеського.

У наступні століття в замку проводилися різні модернізаційні роботи , і маєток залишався в руках Даумонт-Сєсіцьких до початку 18 століття , коли Маріанна (Мар'яна), мстиславська воєвода, вийшла заміж за Міхала Антонія Радзивілла (1687-1721) з гербу Тронби. Після смерті братів Казимира і Станіслава, які залишилися без спадщини, вона передала маєток Сєсіки у спадок своєму чоловікові. Їхній зять, Леон Радзивілл (1722-1751 ) , у 1745 році продав маєток за борги Довгяллосам з гербу Задора . Однак пам'ять про Довмунтів збереглася у назвах довколишніх сіл Довмунтишки і Довмунтово.

Новий власник, Казимир Довігялло, відбудував палац, який був зруйнований шведською армією під час шведського вторгнення. Ще одну реставрацію у 1820-1839 роках провів його онук Домінік (1789-1857). Серед іншого, він наказав увінчати вежі з боку озера неоготичним зубцем, а дві передні вежі знести. Тоді ж було збудовано стайню та зерносховище у стилі класицизму. Наступним власником був Станіслав Ґжеґож Довґялло (1822-1905) . Саме з його ініціативи у 1904 році неподалік було збудовано неокласичну будівлю під назвою "Академія" , призначену для обслуговування відвідувачів та шкільних цілей місцевого населення. Будівля має два портики, організовані на коротких сторонах.

Маєток Дов ґялло залишався в руках родини Довґялло до 1940 року, коли Оскар Ян Довґялло (1902-1988) та його дружина Христина, уроджена Єзерська, були змушені його покинути. Після війни вони оселилися в Сопоті. Після 1945 року в палаці розмістили школу, а згодом - офіси колгоспу та квартири для його працівників. З 1972 року будівля була занедбана. У 1999 році почалася реставрація, яку завершили кілька років тому , розмістивши в палаці філію музею у Вількомірі.

Замок був побудований над озером і з трьох боків оточений ровом. Це витягнута прямокутна будівля, двоповерхова, спочатку обрамлена з чотирьох кутів приземкуватими вежами, на один поверх вищими за основний корпус. Збереглися лише дві з них, з боку озера - одна з круглим планом, а інша - з чотирикутним. Це свідчить про те, що вони були збудовані не одночасно. У наступні десятиліття між вежами була розширена тераса, що дозволяла відвідувачам милуватися мальовничими околицями, а також оглядати володіння власника, що тягнулися до самого горизонту. Будівля увінчана високим дахом. Мальовничістю вирізнявся корпус будівлі з різними виступами веж, прикрашених аркадами, панелями і отворами, що чергуються. Замок у Сішяї можна порівняти з подібними сторожовими вежами в литовських Роканчішкесі або Нарвілішкесі.

У Сішяйському замку збереглися старовинні каміни і склепіння 16-18 століть, а також поліхромна і цегляна підлога. У деяких кімнатах були перекриті стелі. Замок-резиденцію оточував парк площею 3 га, залишки якого можна побачити і сьогодні.