В 1896 году участок вместе домом, построенным по проекту архитектора А.К. Колмана, тогда еще на ул. Сергиевской (сейчас Чайковского), был выкуплен коллежским советником А.Ф. Кельхом. Деньги на покупку были взяты из приданого его супруги, В.П. Кельх, и владение переписали на ее имя.

Над перестройкой особняка работали архитекторы Василий Шене и Владимир Чагин. По их проекту главное здание было надстроено, переоформлены фасады и интерьеры. Но владелице построенный дом не понравился, и она пригласила другого архитектора, Карла Шмидта, который не изменил фасады, но возвел во дворе готический павильон, благодаря чему и сложился окончательный ансамбль отделки и внутренних помещений особняка.

Эмигрировав в Париж в 1904 году, хозяйка оставляет особняк супругу и детям. Но уже в 1905 году состояние семьи начало истощаться. В 1910 году супруги Кельхи оформляют развод, а в 1914 году А.Ф. Кельх продает особняк И.М. Александрову, члену совета Торгового общества взаимного кредита.

После революции дом национализируют. В разные годы тут размещаются Школа экранного искусства, райком КПСС Дзержинского района, отделение ЮНЕСКО. В 1998 году дом передали СПбГУ, сейчас здание принадлежит Министерству юстиции.