В 1802 г. Лас Каз возвращается во Францию, воспользовавшись существенным послаблением мер, против эмигрантов. Он ведет нелегкую жизнь, поселившись в антресолях дома номер 6 по улице Сен-Флорантэн в Париже. Оттуда, в надежде добиться благосклонного внимания со стороны императора французов, Лас Каз направляет Наполеону свой "Атлас". Однако милости всемогущего императора заставляли себя ждать. Тем временем Лас Каз пишет письмо императрице Жозефине, которая, получив письмо, вспомнила о встречах с молодым морским офицером на Мартинике и оказала ему протекцию. В 1806 г. маркиз де Лас Каз был представлен ко двору. В 1808 г. Лас Каз был пожалован в бароны Империи, а через год его прикомандировывают к штабу корпуса маршала Бернадотта, где он находился с сентября 1809-го по январь 1810 гг.

21 декабря 1810 г. Лас Каз, благодаря поддержке Жозефины, назначается камергером, а 27 апреля 1810 г. — докладчиком в Государственном совете. В день рождения Наполеона (1810 г.) Лас Каз был пожалован в графы Империи. В 1810–1812 гг. Лас Каз выполнял ряд важных дипломатических и военных поручений в Голландии, Иллирии и на западном побережье Империи.

В 1814 г. Лас Каз отказался поставить свою подпись под актом Государственного совета, отрешавшим Наполеона от власти, и протестовал против помещения в одной из газет списка представителей дворянства, требовавших реставрации королевского режима (в этом списке значилась и фамилия Лас Каза). С возвращением Бурбонов Лас Каз оказался не у дел и уехал в Англию, но с воцарением Наполеона в 1815 г. он вновь возвращается в Париж, становится камергером и назначается государственным советником. После Ватерлоо, оставшись верным отрекшемуся императору, Лас Каз просит у Наполеона разрешения сопровождать его в изгнание.