Замок Хэтли был построен в 1908 году. Его строительство было начато двумя годами ранее, когда вице-губернатор провинции приобрел землю в имущество и поручил известному канадскому архитектору Самюэлю Маклере построить 40-комнатный дом в шотландском баронском стиле, популярном в эдвардианский период. Дансмаир также создал много красивых садов, пользуясь услугами известных американских садовых дизайнеров Бретта и Холла. По старой европейской традиции они были названы "Хэтли Парк". Замок служил семейной резиденцией до тех пор, пока не был продан правительству Канады.

Во время Второй Мировой Войны планировалось, что король Англии Георг VI, его жена королева Елизавета, и их две дочери, принцессы Елизавета и Маргарет будут проживать в Канаде. Именно Замок Хэтли должен был стать их домом на время военных действий. Однако в итоге было решено, что это будет слишком большой удар по морали государства, и семья осталась в Лондоне.

Когда планы по использованию замок в качестве королевской резиденции провалились, здание было передано в пользование военно-морскому учебному центру. Он был закрыт в 1995 году и с тех пор замок и его территория является национальным историческим объектом.