Обязанности секретаря оказались более беспокойными, чем можно было ожидать от этой должности. Когда, например, первая попытка прорыва через Бадахос была отбита с большими потерями, Фитцрой Сомерсет возглавил один из штурмовых отрядов, захвативших бастион Сан-Висенте и вынудивший крепость сдаться. Это открыло победоносной британской армии дорогу через Испанию во Францию, к тому времени ослабленную после отступления армии Наполеона из Москвы.

В тот год двадцатитрехлетний лорд Фитцрой был подполковником вновь созданного по инициативе лорда Веллингтона 1-го гвардейского пехотного полка. Его будущая карьера, казалось бы, обеспечена. Он попал в круг приближенных лорда Веллингтона и быстро продвигался по служебной лестнице.

В 1814 году, после окончания войны с Наполеоном, лорд Фитцрой женился на очаровательной племяннице своего начальника и друга

То время было безусловно счастливейшим периодом его жизни. Когда Веллингтон получил должность посла в Париже, лорд Фитцрой остался его помощником. Во время отсутствия патрона (тот участвовал в работе Венского конгресса) он выполнял все обязанности посла. Лорд Фитцрой бегло говорил по-французски, хотя и с сильным английским акцентом. Молодая супружеская пара пользовалась всеобщей симпатией и уважением. Однако вскоре тот счастливый период их жизни неожиданно закончился.

В феврале 1815 года Наполеон бежал с острова Эльба. В следующем месяце он с триумфом вступил в Париж, и война началась снова.

Лорд Фитцрой отвез беременную жену в Брюссель и 18 июня уже находился в штабе герцога Веллингтона в Ватерлоо, куда они вместе выехали из Брюсселя утром 16 июня. В течение следующих трех дней он вновь выполнял обязанности главного адъютанта герцога.