Красивое и величественное здание костела, напоминающее римские строения, просуществовало в своем первозданном виде 125 лет. В годы Великой Отечественной войны костел сильно пострадал и больше не восстанавливался. По слухам, из него начинался подземных ход, ведший на другую сторону озера. В этом подземелье, якобы, хранились боеприпасы, которые и были взорваны, отчего сам тоннель завалило, а от костела остались одни развалины. Кроме самого Рясненского костела на прилегающей территории размещались хозяйственные постройки, огород, сад, кладбище, деревянная колокольня, но до настоящего времени сохранились только кирпичные стены и своды костела.