Lubang tak beraturan yang terbentuk secara alami di tebing puncak gunung ini disebut Gunung Kulong oleh penduduk setempat. Disebut juga Gunung Tianmen karena bentuknya yang menyerupai "gerbang" dan tulisan "Gunung Tianmen" di dinding bagian dalam gua. Taman ini mencakup area seluas 669,41 hektar.