Pese a su nombre, el conjunto reúne más de 12.000 figuras de Buda, y pese a la palabra monasterio, aquí no vive ningún monje; lo gestionan íntegramente laicos.

El venerable Yuet Kai, que había llegado a Hong Kong desde China continental en 1938, lo fundó en 1949 en un terreno donado por el propietario de una tabacalera local. Él y sus seguidores lo construyeron a mano, subiendo los materiales desde el pie de la colina, con fondos reunidos entre donantes laicos, y se terminó en 1957. Yuet Kai murió en 1965, y su cuerpo conservado se expone en la sala principal.

Las estatuas de arhats del camino las hicieron artistas de las provincias de Yunnan y Guangdong y siguen el modelo de las de un templo de Kunming, la ciudad natal de Yuet Kai. Su instalación, iniciada en 2001 sin autorización del gobierno, provocó roces con las autoridades por el riesgo de deslizamientos, pero tras una evaluación de seguridad se permitió que se quedaran.

Arriba, el conjunto se extiende por más de 8 hectáreas en dos niveles. El nivel superior tiene cuatro salas llenas de estatuas de Buda que honran a Kwun Yam junto con otras divinidades de las tradiciones budista y taoísta. El nivel inferior alberga otra sala, dos pabellones, una torre y una pagoda de nueve pisos; el templo principal y la pagoda son edificios históricos catalogados de grado III. El monasterio tiene también un restaurante vegetariano que sirve platos tradicionales chinos.

En julio de 1997, un alud de barro tras varios días de lluvias intensas sepultó la casa del guarda del templo, que murió, y el conjunto no se reabrió por completo hasta el 31 de julio de 2000, una vez reparadas las laderas de alrededor. Los aficionados al cine quizá reconozcan el templo por la escena inicial del thriller policíaco Infernal Affairs, de 2002, en la que el jefe de una tríada reúne a sus jóvenes reclutas antes de infiltrarlos en la policía.