Они предназначались для отдыха и обедов владельца усадьбы в узком кругу избранных и помещались в дикой части парка. Для того чтобы общению хозяев и гостей не мешало присутствие прислуги, в таких павильонах обычно устанавливались механизмы, приводившие в движение подъемные столы. Павильон «Эрмитаж» не перестраивался с середины XVIII века, поэтому его внутренняя отделка дошла до нашего времени почти без изменений. В ходе реставрационных работ 2005–2006 годов канал вокруг Эрмитажа был восстановлен на основе планов, составленных В. И. Нееловым, материалов археологических исследований и рисунка М. И. Махаева. Уникальное для парковой архитектуры «фортификационное» сооружение вновь обрело исторический облик и необычную отделку из валунов и известняковых блоков.