Благодаря этому здание хорошо сохранились как снаружи, так и внутри.
Строение на другой стороне Гагаринской (дом 24 по набережной Кутузова) тоже было когда-то особняком, причём одним из самых богатых и красивых по своей внутренней отделке. Двухэтажное здание, построенное в последней четверти XVIII века, в 1827 году купил граф Александр Григорьевич Кушелев-Безбородко.
Александр Григорьевич был сыном Григория Григорьевича Кушелева, адмирала «гатчинской флотилии, о котором уже упоминалось в связи с домом 6, и Любови Ильиничны Безбородко – племянницы екатерининского вельможи, князя Александра Андреевича Безбородко. После смерти в 1815 году Ильи Андреевича Безбородко, брата канцлера, род Безбородко пресекся и тогда Александр I повелел Александру Григорьевичу Кушелеву «…въ уваженіе къ отличному служенію покойнаго князя Безбородко, на пользу и славу отечества всю жизнь посвятившему, именоваться впредь графомъ Кушелевымъ-Безбородко, дабы знаменитая заслугами фамилія сія съ кончиною послҍдняго в родҍ не угасла, но паки обновясь, пребыла навсегда въ незабвенной памяти россійскаго дворянства…»
Наб. Кутузова, 24
Желая превратить своё жилище в «храм искусств», новый владелец пригласил архитектора Василия Алексеевича Глинку, который, помимо традиционного набора парадных залов, гостиных и прочих комнат, предусмотрел устройство «… публичной галереи, открытой постоянно для художников и публики, допускаемых без стеснения в форме одежды». Превосходная коллекция картин, начало которой положил канцлер Безбородко, а потом значительно пополнили Александр Григорьевич Кушелев-Безбородко и его сын, Николай Александрович, была, впоследствии, завещана Академии художеств и в настоящее время хранится в Эрмитаже.
После смерти Александра Григорьевича особняк перешёл к старшему сыну, Григорию Александровичу. Архитектор Роман Романович фон Генрихсен в 1859-1860 годах полностью перестроил особняк, придав ему нынешний неоренессансный облик.
О том, как выглядели после перестроения внутренние помещения, можно судить по воспоминаниям поэта Афанасия Фета: «Беломраморная лестница, ведущая в бельэтаж, была уставлена прекрасными итальянскими статуями. В анфиладе комнат стены были покрыты дорогими картинами голландской школы. Не буду говорить о блестящий зале, диванной, затянутой персидскими коврами, и множестве драгоценных безделок…».
С Григорием Александровичем связаны местность Кушелевка на Выборгской стороне и Безбородкинский проспект (с 1918 года – Кондратьевский). Он также известен и как издатель. Вместе с Яковом Петровичем Полонским они издавали журнал «Русское слово», при котором, в качестве приложения, выходил «Шахматный листок» – первое русское шахматное издание (шахматы тогда только входили в моду).
В 1858 году по приглашению Григория Александровича в Петербург приезжал Александр Дюма – автор «Графа Монте-Кристо» и «Трёх мушкетёров». Знаменитого писателя граф поселил в Полюстрово на своей даче,
