تم وضع حجر الأساس للبساتين في الحديقة عام 1186، أي قبل قرابة 900 عام. خلال حكم أسرة يوان الملكية وأسرة مينغ الملكية وأسرة تشينغ الملكية، قام الأباطرة بإنشاء أفنية ومجمعات على سفوح جبل شيانغ شان، وتوجهوا إليها للاصطياد وقضاء الصيف والخريف كل عام. كان معبد شيانغ شان أشهر معبد بين كل المعابد الواقعة في غربي بكين.