1959. Stevens rencontre Miss Kenton ; cela fait vingt ans qu'ils ne se sont pas vus.
Stevens est depuis toujours un majordome exemplaire au service de Darlington Hall. Il décide enfin de s’accorder quelques congés. C’est l’occasion pour lui de se remémorer son passé et ses vieux souvenirs qu’il avait enfouis jusqu’ici. Lui revient alors dans l’esprit qu’un jour, il poussa jadis la femme de sa vie dans les bras d’un autre. Aujourd’hui est venu le temps des remords...