La ferme Whitehall date de 1450, époque à la quelle elle n´était encore qu´un simple cottage sur la rive de la rivière Medway.

A travers le temps, le bâtiment a été agrandi à de nombreuses reprises, l´extension la plus importante ayant été construite en 1821 par la famille Comport. Cette extension est de loin la plus importante mais également la plus élégante et elle apporte beaucoup au caractère actuel de la maison.

De nombreuses murs et plafonds décorés de cette partie géorgienne de la maison sont toujours visibles à l´heure actuelle.