Ce livre, publié en 1978, tantôt écrit sous forme de journal intime ou de narration à la première personne, est le récit d’un été mouvementé à la fin de la vie de Charles Arrowby, homme célèbre du théâtre britannique. Arrowby est un acteur, dramaturge, réalisateur et romancier de femmes.
Le roman commence avec Charles qui vient de se retirer de ce qu’il a tendance à considérer comme la superficialité scintillante du monde du théâtre et se dirige vers ce qu’il a également tendance à penser être la paix relative de l’Angleterre côtière. Il a acheté une maison près de la mer, Shruff End, a emménagé avec très peu et semble résolu à abandonner les vieilles habitudes émotionnelles, pratiques et croyances. Il prévoit de vivre simplement, de manger purement et de penser tranquillement.
Les amis de Charles à Londres semblent avoir d’autres idées. Une série de lettres et de visiteurs non invités perturbe à plusieurs reprises le refuge de Charles, dont les plus inquiétants impliquent d’anciens amants. Après une rencontre particulièrement émouvante, Charles se rend compte soudain qu’une femme presque renversée par la voiture du visiteur qui s’en va est en fait son amour d’enfance, Hartley. Ils s’étaient aimés de manière non sexuelle à l’adolescence et avaient juré de se marier, mais peu de temps avant que Charles ne déménage à Londres pour commencer une école de théâtre, Hartley a rompu leur relation et a soudainement et complètement disparu. Cette perte a hanté Charles et toutes ses autres relations pendant toute sa vie.
Après avoir vu Hartley, Charles se concentre de manière obsessionnelle sur la reconstruction de leur relation passée innocente et purement amoureuse. Des complications apparaissent sous la forme du mari émotionnellement violent de Hartley et de son fils en fuite (Titus), des ex-amants en visite à plusieurs reprises de Charles, de son cousin étrangement éloigné James et de la propre ambivalence de Hartley quant au retour dans le passé. À un moment donné, Charles confine de force Hartley chez lui, où elle devient presque dérangée dans son désespoir de retourner à son autre vie. Charles est finalement persuadé de la laisser partir.
Une fois Hartley parti, la vie reprend une sorte de normalité forcée à Shruff End – jusqu’à ce que, après une soirée bien arrosée avec des amis, Charles soit poussé à la mer. Il survit, imaginant qu’il a été sauvé par James. Peu de temps après avoir récupéré, cependant, il reçoit un autre choc. Le fils de Hartley, qui vivait avec lui et qu’il en était venu à considérer comme son propre fils, se noie dans la mer. Ces traumatismes envoient Charles encore plus loin dans des fantasmes et des imaginations obsédés par Hartley et son mari, qu’il blâme à la fois pour l’attentat contre sa vie et la mort de Titus.
Finalement, Charles apprend qu’il a été poussé à la mer par l’ex-mari en colère d’un de ses ex-amants, que Hartley et son mari émigrent en Australie et que plusieurs de ses amis qu’il croyait autrefois pouvoir contrôler et manipuler. continuent leur vie. Il découvre également, après la mort soudaine et légèrement mystérieuse de James, qu’il a été laissé héritier de sa succession. Il vend Shruff End, déménage à Londres et, alors qu’il trie ses sentiments, ses impressions et ses expériences, commence à revenir dans la vie qu’il a laissée derrière lui.