Все это не мешало мадам де Сталь бросаться на защиту бывшего возлюбленного по любому поводу. Однажды в пылу спора с графом Ростопчиным по поводу некоего сочинения Бенжамена Констана мадам де Сталь заявила: «Вы родились прежде эры цивилизации». В ответ наш герой назвал знаменитую писательницу «сорокой-заговорщицей». Разгорячившаяся мадам де Сталь заявила, что «русским надо сделаться опять варварами, какими они были прежде». Тогда граф Ростопчин, упомянув свое татарское происхождение, объявил, что готов вернуться к занятиям предков, если и собеседница подаст соответствующий пример. «Я стану пасти свои стада, только что вы возвратитесь в контору ваших предков и станете вести конторские книги; не знаю только, выиграете ли вы на этом столько, сколько родитель ваш на курсе». Далее, по словам Н.М. Лонгинова, «все захохотали, и г-жа де Сталь потерпела полное поражение». Для того чтобы понять смысл саркастического заявления графа Ростопчина, нужно принять во внимание, что родителем Жермены де Сталь был министр финансов Людовика XVI Жак Неккер. Генеральный контролер финансов – так называлась его должность. Некогда, играя на курсах, он приобрел огромное состояние. Но его политика как главы королевской финансовой администрации довела страну до кризиса. По мнению многих историков, именно отставка Жака Неккера послужила толчком к началу Великой французской революции.

Видимо, влияние в французском высшем обществе графа Ростопчина было высоким, о чем свидетельствует тот факт, что его неприязнь к журналисту стала предметом озабоченности весьма именитых лиц. Подруга Талейрана княгиня Водемон задалась целью примирить графа Ростопчина с Бенжаменом Констаном. Она пригласила обоих к себе в гости и вынудила их провести продолжительное время с глазу на глаз. «Ну, как находите вы г. Констана?» – спросила старая княгиня нашего героя по окончании встречи. «Княгиня, – отвечал Ростопчин, – он никогда не будет моим Веньямином».

Князь Александр Александрович Шаховской поведал об одной ставшей общеизвестной шутке Федора Васильевича. В одном из парижских театров, когда публика освистывала неудачливого дебютанта, граф Ростопчин встал и начал аплодировать. «Боюсь, как сгонят его с театра, то он к нам отправится в учители», – объяснил граф Ростопчин свои действия.

Вскоре после переезда во Францию семьи Ростопчиных две старшие дочери Федора Васильевича, Софья и Наталья, вышли замуж. Они венчались в июле 1819 года в Париже. Наталья вышла замуж за Дмитрия Васильевича Нарышкина, а старшая дочь Софья – за графа де Сегюра. Вот что писал по этому поводу Александр Яковлевич Булгаков в письмах к своему брату Константину: «Александр Петрович Ермолов мне подтвердил (а он из Парижа приехал), что и другая дочь графа Ростопчина, моя фаворитка Наташа, помолвлена. Отгадай, за кого. За Митюшу Нарышкина. Каков! Он будет очень счастлив, она прелюбезная, умела устоять против всех убеждений матери. Граф дает ей сто тысяч годового дохода. Эта, небось, не пошла за француза». Об избраннике старшей дочери графа Ростопчина, Софьи, Александр Яковлевич Булгаков рассказывал: «Вчера получил я письмо от графа Эжена Сегюра, внука того, что был послом в Петербурге, прекрасного молодого человека, у которого будет 60 тысяч фунтов ренты с прекрасного имения близ Парижа… Граф ожидает только дозволения императора, чтобы отпраздновать две свадьбы».

Отношения между Софьей и ее супругом остыли вскоре после рождения их первенца. Граф Ростопчин подарил старшей дочери усадьбу Нуэтт в Нормандии, где она провела большую часть своей жизни. Неожиданный поворот в судьбе произвела Софья де Сегюр в возрасте 57 лет. Она начала писать детские книги и стала одной из самых знаменитых писательниц Франции. Ее называли бабушкой французских детей и французским Льюисом Кэрроллом. Она написала более двух десятков произведений для детей.