Selsey est une ville côtière et une paroisse civile, située à environ 12 km au sud de Chichester dans le West Sussex, en Angleterre. Selsey se trouve à l'extrémité sud de la péninsule de Manhood, presque coupée de la partie continentale du Sussex par la mer. Elle est délimitée à l'ouest par la baie de Bracklesham, au nord par Broad Rife (rife étant le mot local pour ruisseau ou crique), à l'est par Pagham Harbour et se termine au sud par Selsey Bill. Au large de ses deux côtes, il existe d'importantes formations rocheuses sous la mer, appelées rochers d'Owers et rochers de Mixon. L'érosion côtière a toujours été un problème pour Selsey.
La B2145 est la seule route d'entrée et de sortie de la ville qui traverse un pont au-dessus de la prise d'eau du port de Pagham, à un point appelé "le ferry". A une époque, Selsey était inaccessible à cause de la marée montante, et un bateau était stationné au ferry pour amener les chevaux et les passagers à Sidlesham et les en ramener.