Seit Anfang der Christianisierung Englands stand hier eine Kirche. Sie wurde dem hl. Dunstan, Bischof von London im 10. Jh., geweiht. Das Bauwerk sowie einige Denkmäler im Inneren stammen aus dem 13. Jh. Im Pfarrregister, das auf das 16. Jh. zurückgeht, sind ebenfalls die Geburten auf dem Meer eingetragen. Diese Kirche ist auch unter dem Namen "Church of the High Seas" bekannt.