La historia comienza a principios del siglo XIX, cuando un asentamiento birmano creció en Pulau Tikus. La comunidad quería un lugar para rezar. Una mujer conocida como Nonia Betong, a veces escrita Nyonya Betong, dio un paso al frente. Una placa en el templo la nombra como principal fideicomisaria, junto con otras tres fideicomisarias. Compraron el terreno a un hombre llamado George Layton por 390 dólares españoles, la moneda común de la época. Las operaciones de compraventa de terrenos en Penang requerían entonces la aprobación del teniente gobernador británico, Sir George Leith, quien autorizó la transferencia a las fideicomisarias. Un pequeño templo, llamado inicialmente templo Nandy Moloh o Nandy Molah, se fundó en 1803. Algunas fuentes dan 1805 como la fecha del primer templo budista de Penang. Esto encaja con la parte más antigua que se conserva del complejo, el estupa, que fue consagrado en 1805. Así, la fundación data de 1803, y el estupa llegó dos años después. Es un comienzo notable para un templo dirigido por mujeres.