Валковский везет героя на вечер к Кате, где присутствует и Алеша. Наташин друг может убедиться в тщетности её надежд на Алешину любовь: «жених» Наташи не может оторваться от Катиного общества. Затем Иван Петрович с князем едут ужинать в ресторан. Во время разговора Валковский сбрасывает маску: высокомерно третирует доверчивость и благородство Ихменева, цинично разглагольствует о женских достоинствах Наташи, открывает свои меркантильные планы относительно Алеши и Кати, смеется над чувствами Ивана Петровича к Наташе и предлагает ему деньги за женитьбу на ней. Это сильная, но абсолютно безнравственная личность, чье кредо «люби самого себя», а других используй в своих интересах. Особенно забавляет князя игра на возвышенных чувствах своих жертв. Сам он ценит лишь деньги и грубые удовольствия. Он хочет, чтобы герой подготовил Наташу к близкой разлуке с Алешей (тот должен уехать в деревню вместе с Катей) без «сцен, пасторалей и шиллеровщины». Его цель — остаться в глазах сына любящим и благородным отцом «для удобнейшего овладения впоследствии Катиными деньгами».
Далекий от планов отца, Алеша разрывается между двумя девушками, уже не зная, какую любит сильнее. Однако Катя по своему характеру ему больше «пара». Перед отъездом соперницы встречаются и решают судьбу Алеши помимо его участия: Наташа с болью уступает Кате своего возлюбленного, «без характера» и по-детски «недалекого» умом. Странным образом «это-то» она «в нем и любила больше всего», а теперь то же самое любит Катя.
Валковский предлагает покинутой Наташе деньги за связь с развратным старичком графом. Подоспевший Иван Петрович бьет и грубо выгоняет оскорбителя. Наташа должна вернуться в родительский дом. Но как убедить старика Ихменева простить хотя и горячо любимую, но опозорившую его дочь? В дополнение к прочим обидам князь только что выиграл судебный процесс и отнимает у несчастного отца все его небольшое состояние.
Уже давно Ихменевы задумали взять к себе девочку-сиротку. Выбор пал на Нелли. Но та отказывалась жить у «жестоких» людей, подобных её дедушке Смиту, так и не простившему её мать при жизни. УМОЛЯЯ Нелли рассказать Ихменеву историю своей матери, Иван Петрович надеется смягчить сердце старика. Его план удается: семья воссоединяется, а Нелли вскоре становится «идолом всего дома» и откликается на «всеобщую любовь» к себе.
В теплые июньские вечера Иван Петрович, Маслобоев и доктор часто собираются в гостеприимном домике Ихменевых на Васильевском острове. Скоро разлука: старик получил место в Перми. Наташа грустна из-за пережитого. Омрачает семейное счастье и серьезная болезнь сердца у Нелли, от которой бедняжка вскоре умирает. Перед смертью законная дочь князя Валковского не прощает, вопреки евангельской заповеди, своего предателя отца, а, напротив, проклинает его. Наташа, удрученная будущим расставанием с Иваном Петровичем, жалеет, что разрушила их возможное совместное счастье.
Эти записки составлены героем через год после описанных событий. Теперь он одинок, в больнице и, кажется, скоро умрет.
