Особняк князей Гагариных был построен в 1817 году по проекту архитектора Осипа Бове. Его последним владельцем был гвардейский поручик Виктор Николаевич Гагарин.
Особняк князей Гагариных на плане Москвы 1852 года:
После революции в доме Гагариных разместилась Книжная палата. Во время одного из первых налетов на Москву 22 июля 1941 года этот великолепный особняк был разрушен бомбой.