В 1820-х годах участок земли на углу Невского проспекта и набережной реки Фонтанки купил купец Федор Лопатин. Здесь уже были построены два четырехэтажных здания. По проекту архитектора Василия Моргана к ним пристроили еще один корпус. В итоге в доме Лопатина было около ста квартир, он стал одним из крупнейших доходных домов в Петербурге.

Дом прозвали литературным из-за его знаменитых арендаторов. С 1842 по 1846 год здесь снимал квартиру литературный критик Виссарион Белинский. К нему в гости заходили писатели Николай Некрасов и Иван Гончаров, публицист Александр Герцен. В 1850-х годах в доме Лопатина также жил Иван Тургенев в то время, когда работал над циклом рассказов «Записки охотника». Одновременно с ним здесь недолгое время проживал поэт Федор Тютчев. 

В 2009-2010 годах здание пришло в аварийное состояние, его частично снесли, сохранив фасады, и практически полностью перестроили. Сейчас в доме находятся офисы и коммерческие помещения.