Первое время Эдвард не хотел жить и постоянно чувствовал присутствие Элизабет в их нью-йоркском доме. Позже он возненавидел пустоту огромных комнат и старался как можно больше путешествовать, но потом осознал, что забросил малышек-близнецов, последний дар Элизабет. И хотя не мог заставить себя продать особняк, выстроенный отцом, в "котором родился и вырос, все же закрыл его и перебрался поближе к детям. С тех пор он никогда не скучал ни по дому, ни по Нью-Йорку, ни по светскому обществу.

Не обращая внимания на окружающее, Оливия продолжала заполнять длинные бумажные полосы своим мелким аккуратным почерком, отмечая, что нужно заменить и какие вещи заказать заново. Иногда она посылала слуг в городской дом привезти необходимое оттуда, но по большей части обращалась в магазины, зная, что отец не любил нью-йоркское поместье. Она, как и Эдвард, была счастлива спокойствием здешней жизни и очень редко ездила в Нью-Йорк, если не считать своего дебюта, когда отец представлял дочерей своим друзьям и всему высшему обществу. Оливия находила светскую жизнь довольно интересной и забавной, но крайне утомительной. Ее изматывали каждодневные выезды в театры, на балы, в гости, необходимость соблюдать строжайшие правила этикета. Она чувствовала себя так, словно постоянно находится на сцене, разыгрывая несвойственную ей роль, так что под конец возненавидела и себя, и окружающих – в отличие от Виктории, которая буквально расцветала в лучах всеобщего внимания. Оливия же облегченно вздохнула, вернувшись к своим книгам, лошадям, цветам и каждодневным прогулкам по холмам к близлежащим фермам.

Она обожала скакать верхом, прислушиваться к весенним звукам, наблюдать, как медленно, неохотно уходит зима, любоваться многоцветьем осенних красок. И едва ли не с малолетства вела отцовский дом с помощью Алберты Пибоди, женщины, вырастившей сестер и заменившей им мать. Хотя зрение у Берти было неважным, ум по-прежнему оставался острым, и она с закрытыми глазами могла отличить Оливию от Виктории.