В 1828г. в имении Кротовши был построен каменный костел Святого Казимира, который стал родовой усыпальницей владельцев имения. В 1852г. в его склепе был похоронен генерал Владимир Иосипович Гурко. Костел просуществовал до середины 1920-х гг., в это время он уже разрушался и находился в плохом состоянии.