Au fil des siècles, la petite Idolta a appartenu aux ducs Massalsky et Sapieha, ainsi qu'à la famille Miłosz. Une ferme seigneuriale distincte y a été établie au XIXe siècle et a appartenu à Józef Miłosz, puis à son fils Eugeniusz (mort en 1885), marié à Emilia née Targońskie. Les propriétaires suivants furent leurs enfants. Eugeniusz (mort en 1908), Józef (mort en 1914) et Jadwiga (née Iżycka). Les deux frères vivent à Drua, tandis que leur sœur reste à Idolt. Elle vit seule ; elle se serait débarrassée de son mari peu de temps après son mariage. En 1909. Emilia (la fille de Józef) a vendu le domaine d'Idolt à la famille Świderski, qui l'a possédé jusqu'en 1939.

Le manoir est situé près de la rivière du même nom. Le manoir a été construit dans la seconde moitié du XIXe siècle, sur un plan rectangulaire. Il s'agit d'un bâtiment en briques d'un étage avec une partie centrale en bois, surmontée d'un fronton triangulaire avec un oculus. Il est précédé d'un portique à trois arcades, au-dessus duquel se trouve un balcon. La façade est soulignée par un risalit central.

L'intérieur du manoir abritait autrefois les portraits de la famille Miłosz et une bibliothèque, mais ces collections n'ont pas survécu aux tempêtes historiques. Après la fin de la Seconde Guerre mondiale, le manoir est devenu le siège de l'administration du kolkhoze et le domaine a appartenu au kolkhoze. En 2005-2008, le bâtiment a été rénové pour abriter une bibliothèque et un club de village. Une dépendance et des bâtiments agricoles en pierre des champs ont également été conservés à proximité de la résidence de Milosz. L'ensemble est entouré des vestiges du parc du manoir avec de beaux arbres anciens.

Une ancienne chapelle de la famille Miłosz, construite en 1862, a été conservée sur une petite péninsule du lac, également appelée Idołta. Le bâtiment a été dévasté après la Seconde Guerre mondiale. Au début du 21e siècle, la chapelle a été réparée et rendue aux fidèles. Depuis, elle est utilisée par les catholiques comme église secondaire de Saint-Jean-Baptiste dans la paroisse de Notre-Dame du Scapulaire.

L'église se compose d'une nef rectangulaire, d'un chœur pentagonal et de deux sacristies. La façade est couronnée d'un fronton triangulaire, au-dessus duquel s'élève une petite tourelle quadrilatérale en bois. Le fondateur Eugeniusz Miłosz et son épouse Emilia, née Targońskie, ainsi que leurs enfants Eugeniusz, Józef et Jadwiga, et l'épouse de Józef, Maria, née Kowalewska, sont enterrés dans les voûtes. Certains membres de la famille Miłosz ont été enterrés dans le petit cimetière entourant la chapelle, mais celui-ci a été détruit après 1945. Seule la pierre tombale de Konrad Miłosz, décédé en 1852, a survécu.