Дворец Разумовского на Мойке был построен как маленькая копия загородных царских резиденций. На его содержание граф ежегодно тратил 52 тысячи рублей.
Отличительной особенностью был еще и сад, состоящий из двух частей: яблоневой и липовой. Графа выписывал для своего сада из-за границы самые экзотические деревья, цветы, кустарники. Делился экзотическими новинками с Ботаническим садом и со всеми, кто разделял его увлечение.
Уникальный сад исчез в первые годы XX века. А дворец сохранился до наших дней, и сегодня является главным корпусом Российского государственного педагогического университета им А. И. Герцена.