Сам он тоже не чурался женского общества, хотя и не был так ветрен, как ему приписывали. В молодости он состоял в романтической связи с фрейлиной Александрой Васильевной Жуковской и, когда та забеременела, был даже готов жениться, но… царственный отец не одобрил подобного мезальянса. Молодой человек был отправлен в длительное плавание, а его пассия за границу, где её быстро выдали замуж.