O Castelo de Carisbrooke é o único castelo medieval remanescente da Ilha de Wight. Foi construído em um local romano. A terraplenagem do castelo foi iniciada em 1070. A torre de menagem foi construída no local cerca de 70 anos depois. Nenhum dos edifícios domésticos normandos restam agora. A portaria com suas torres de tambores data dos séculos XIV e XV.
Em 1377, os franceses desembarcaram na ilha, mas o castelo não foi atacado.
Durante os tempos de Elizabethan, a ameaça de uma invasão espanhola foi evitada quando a Armada espanhola foi afastada em uma batalha próxima. No entanto, o castelo foi consideravelmente alterado para resistir à nova artilharia. Linhas externas de defesa foram construídas cercando o antigo castelo. As cortinas, bastiões e baluartes permanecem em boas condições até hoje.
Carlos I foi detido como prisioneiro no castelo em 1647. Uma tentativa de fuga falhou quando ele ficou preso nas grades.
Mais tarde, o castelo foi a residência ocasional do governador da Ilha de Wight e tornou-se o lar da Princesa Beatrice, filha mais nova da Rainha Vitória, quando ela era governadora.
