Вокруг павильона к 1850 году был разбит сад с тремя прудами, композиционно с павильоном сочетались расположенные рядом мост из гранита и каскад. У фасадов стояли перголы — на севере два круглых и восемь четырёхугольных столбов из полированного гранита с терракотовыми вазами на них, на юге — шестнадцать герм из серебристо-серого сердобольского гранита авторства А. И. Теребенева. На территории павильона к 1909 году также стояли два бронзовых кентавра, мраморная статуя Психеи, мраморная нимфа и бронзовая статуя императрицы Александры Федоровны.
В 1917 году павильон был взят под государственную охрану. Предлагалось использовать «попытку „катящегося к закату самодержавия внести интимную струю в официальную обстановку показного строительства“» как летнюю дачу, в 1924 году прошёл ремонт. Новый ремонт был запланирован на лето 1941 года. С 19 июля 1941 года в павильоне располагался штаб 264-го отдельного пулеметно-артиллерийского батальона, в башне был корректировочный артиллерийский пункт. После войны кирпичи разрушенного павильона разбирали для своих нужд местные жители, к концу 1950-х годов был цел цокольный этаж и шесть герм. Существовали проекты консервации и реставрации, но согласно инвентаризации 1984 года павильон был в руинах. После войны уцелели две колонны из тивдийского мрамора южного фасада. На фотографии 1970 года обе колонны ещё на месте, к 1978/79 годам пропала одна из колонн, предположительно в 1980-х годах пропала последняя колонна. В 2021 году КГИОП выпустил Распоряжение об утверждении охранного обязательства с планами реставрации к 2025 году.