Исторически обширный Курортный парк Кисловодска сложился из структурных частей, различающихся по времени создания, расположению, рельефу местности, характеру и стилю насаждений: Нижний (Старый), Верхний (Новый) и Горные парки.
Вверх по берегам речки Ольховки от белоснежной Колоннады до мостика «Дамский каприз» раскинулась самая старая часть современного курорта — небольшой участок, который назывался Публичным садом. Сегодня она входит в Нижний парк, первоначальную территорию паркового комплекса. Он занимает пространство около 15 гектаров. Нижний парк начинается от источника Нарзан в галерее, затем тянется вдоль тенистой долины горной речки Ольховки вверх по ее течению до Зеркального пруда и чуть южнее до изгиба реки с обрывистыми берегами с подъемом на возвышенную площадку Крестовой и Сосновой (Романовской, раньше — Тупой) горок.