Это одно из самых красивых и примечательных зданий Невского проспекта. Первый дворец Белосельских в этом месте был выстроен в конце 18 века. В 1847–1848 годах, по заказу князя Эспера Александровича Белосельского-Белозерского, дворец был перестроен архитектором Андреем Ивановичем Штакеншнейдером, приобретя современный вид. Оформление его фасадов выполнено с участием скульптора Давида Ивановича Иенсена: по его моделям созданы фигуры атлантов и кариатид. Сегодня во дворце расположен городской культурный центр. В Зеркальном (бальном) зале периодически проходят разнообразные музыкальные выступления.
В 1797 году княгиня Анна Григорьевна Белосельская (1773–1846) приобрела у И.А. Нарышкина небольшой каменный дом на углу Невского проспекта и набережной Фонтанки. Дом был снесён, и на его месте, в конце 18 века, архитекторы Тома де Томон и Ф.И. Демерцов построили первый трёхэтажный дворец со скромным фасадом в классическом стиле. Облик этого дома, сохранился на рисунке М.Н. Воробьёва.
В 1847–1848 годах дворец был перестроен архитектором Андреем Ивановичем Штакеншнейдером (1802–1865) по заказу князя Эспера Александровича Белосельского-Белозерского (1802–1846), приобретя современный вид.
После перестройки дворца в стиле необарокко, здание стало напоминать растреллиевские дворцы. В рамках этой работы были не только полностью реконструированы корпуса, выходившие на Невский проспект и Фонтанку, но и возведены новые флигеля во дворе дома.
Существует мнение, что прототипом здания послужил Строгановский дворец, выстроенный по проекту архитектора Бартоломео Растрелли.
В отделке фасадов дворца широко использованы художественные приёмы русского барокко 18 века. Для отделки дворца был приглашён скульптор Давид Иванович Иенсен. По его моделям были выполнены фигуры атлантов и кариатид.
Во внутренней отделке дворца, также выполненной Штакеншнейдером, особо выделялись широкая парадная лестница и мраморные камины. Вдоль лестницы стояли кариатиды и скульптуры, поддерживающие позолоченные канделябры, а в ажурной решётке перил автор поместил изящные вензеля из инициалов владельца.
Великолепно была отделана библиотека Белосельских-Белозерских: стены обиты резными деревянными панелями и затянуты шёлком, камин украшен рельефным узором, огромное зеркало в позолоченной раме.
В 1884 году князь Константин Эсперович Белосельский-Белозерский (1843–1920) продал дворец великому князю Сергею Александровичу. В 1905 году великая княгиня Елизавета Федоровна, став монахиней, завещала дворец своему племяннику – великому князю Дмитрию Павловичу, который в 1917 году продал его. Позднее здание было национализировано, а в 1920 году здесь разместился райком коммунистической партии.
Современный период
В 1990-е годы дворец Белосельских-Белозерских был передан Комитету по культуре мэрии Санкт-Петербурга. В настоящее время здесь расположен городской культурный центр. В Зеркальном (бальном) зале дворца, который обладает прекрасной акустикой и используется как концертный, периодически проходят разнообразные музыкальные выступления.