Downton liegt im Süden von Wiltshire an der englischen Südküste, etwa sechs Meilen südöstlich von Salisbury. Der Ort erstreckt sich am Ostufer des River Avon, während das benachbarte Wick auf der gegenüberliegenden Flussseite liegt. Die Landschaft wird von sanften Hügeln geprägt, und im Westen grenzt das Gebiet an den New Forest. Zu Downton gehören auch die Dörfer Wick und Charlton-All-Saints sowie die kleine Ansiedlung Witherington.
Die Geschichte des Ortes reicht bis in die Steinzeit zurück, wie Funde aus Ausgrabungen belegen. Später siedelten hier Römer, deren Villa mit Mosaiken und einem Badhaus entdeckt wurde. Im Mittelalter war Downton ein bedeutendes Zentrum, das zum Besitz des Bischofs von Winchester gehörte. Das Domesday Book verzeichnete bereits eine große Siedlung mit über hundert Haushalten. Ein Motte-and-Bailey-Schloss entstand nahe dem Fluss, während das heutige Moot House im 18. Jahrhundert auf den Überresten des alten Schlosses errichtet wurde.
Besonders sehenswert ist die Pfarrkirche St Laurence aus dem 12. Jahrhundert mit ihrem markanten Turm und historischen Glocken. Das benachbarte Moot House und das alte Herrenhaus sind ebenfalls von historischem Interesse. Die Umgebung lädt zu Spaziergängen entlang des Avon ein, der einst für die Herstellung von Flechtwaren genutzt wurde. Der Ort ist zudem Namensgeber der Serie *Downton Abbey*, was ihm vereinzelt Touristen beschert, die nach dem fiktiven Schauplatz suchen.