Septembre 1921. Lord Grantham et les siens vont dans les Highlands pour des vacances estivales : c'est leur visite annuelle de la branche écossaise de la famille, les Flintshire. Comme tous les ans, ils séjournent à Duneagle Castle, la vaste propriété des parents de Lady Rose, la jeune et turbulente petite nièce de Lady Violet. L'accueil est chaleureux, mais les tensions qui existent entre les Crawley et leurs hôtes apparaissent rapidement. Edith découvre avec surprise que Gregson, son cher éditeur, passe, comme par hasard, ses vacances dans la région et qu'il n'y est peut-être pas venu seulement pour pêcher. Cela créé des tensions entre Matthew et Mary, qui ne sont pas d'accord quant aux motivations de ce monsieur, de surcroît déjà marié. Par ailleurs, Mary, qui est enceinte de quelques mois, doit faire attention à ne pas trop faire monter sa tension sur les ordres de Matthew, inquiet.