Le Friquet Country Hotel, Castel