Первая каменная церковь была построена в Рыуге в 16- столетии. В 1730 году вместо разрушенной в ходе Северной войны церкви была построена новая, посвященная Пресвятой Деве Марии церковь с великолепной четырехугольной башней.
Усадьба Рогози была построена выходцем из Польши Станиславом Рогозинским. В 1629-1776 годы усадьба принадлежала Херману фон Либсдорфу, а впоследствии в качестве приданого перешла с его дочерью в семью Глазенаппов.