Highclere Castle, nell'Hampshire, è stato utilizzato per le riprese esterne di Downton Abbey, così come per la maggior parte delle riprese degli interni. Gli spazi riservati alle abitazioni dei servitori sono stati invece costruiti negli Ealing Studios a Londra, dove sono state girate le scene relative. La dimora in cui è ambientata la serie era proprietà di Lady Jean Margareth Herbert, contessa di Carnarvon, amica e fidata cortigiana della regina Elisabetta. Lady Jean e la sua antenata Almina avevano ispirato il personaggio di Lady Cora Crawley, a Highclere Castle. Il villaggio di Bampton, nello Oxfordshire, è stato utilizzato per girare le scene all'aperto, in particolare la St. Mary's Church e la biblioteca del villaggio, che funge da ingresso all'ospedale. Le scene della guerra di trincea in Francia nel corso della prima guerra mondiale sono state girate nella Suffolk rurale vicino al villaggio di Akenham. Haxby Park, la tenuta che Sir Richard Carlisle intende comprare nella seconda stagione, è parte della Waddesdon Manor nel Buckinghamshire. Le scene ambientate in Scozia dello speciale natalizio della terza stagione sono state girate all'Inveraray Castle, casa del duca di Argyll. Le scene ambientate nello speciale natalizio a Buckingham Palace della quarta stagione sono state girate a Lancaster House, utilizzata anche per la serie TV The Crown. All'Hotel Ritz di Londra sono state girate alcune scene della sesta stagione.