Трогательная история фильма «Дневник памяти» начинается с момента, когда почтенный старец решается поведать удивительную историю любви своей подруге из дома престарелых. Мужчина долго хранил свой старенький дневник, чтобы однажды отпустить воспоминания и насладиться прошлым. Мудрый старик в своем рассказе возвращается в волнующее босоногое детство, где неопытный паренек впервые встречает судьбу. Мальчик из семьи бедняков находит богатую подружку, с которой проводит уйму времени за бесцельными занятиями.

Увлекательные походы, веселые купания, волнующие посиделки у костра – лишь небольшая часть совместных приключений. По мере их взросления каждое лето интересы начинают меняться. Ной и Элли с упоением проводят время вместе, несмотря на категорический протест родителей девушки. Они пророчат дочери другую лучшую жизнь, чем быт в семье бедняка. А Ной вполне доволен своим статусом работника лесопилки. Девушка разрывается между нежными чувствами и обременительным долгом перед родителями. Когда их настойчивость побеждает, Элли отправляется на учебу. После нее следует выгодное замужество. Но старая любовь к бедному юноше все еще будоражит душу Элли.