Para entender este templo, comienza con una imagen: una ciudad imaginada como una fortaleza con cuatro direcciones, y un guardián para cada una. Las fuentes vietnamitas los llaman los Thăng Long tứ trấn, los cuatro templos guardianes de Thăng Long. Đền Quán Thánh vigilaba el norte, Đền Kim Liên vigilaba el sur, Đền Voi Phục vigilaba el oeste, y Đền Bạch Mã vigilaba el este. Ahí es donde estás parado: la puerta este. Ahora el detalle que debería cambiar cómo ves esta calle. El entorno documentado más antiguo del templo no era una calle en absoluto. Se encontraba en el barrio de Hà Khẩu, en Hữu Túc tổng, distrito de Thọ Xương, prefectura de Hoài Đức — en la desembocadura del río Tô Lịch, donde ese río se encontraba con el Río Rojo. Las fuentes dicen que el templo fue fundado en el siglo IX para honrar al espíritu Long Đỗ. En ese mundo, el agua era el camino. Una desembocadura era una puerta en el sentido más literal, el lugar donde llegaban los barcos, las mercancías y los ejércitos. Guardar el este significaba guardar el agua. El edificio es un superviviente. Una estela conservada en el templo registra una gran restauración en la era Chính Hòa, entre 1680 y 1705, bajo el gobernante Lê Hy Tông — y las mismas fuentes lo nombran como el gobernante de esa era. En 1839, el vigésimo año del reinado de Minh Mệnh, siguieron más obras: el templo fue reparado, se construyó un văn chỉ separado, un santuario para la veneración literaria, y se añadió el Phương đình, ampliando el complejo y dándole la presencia solemne por la que es conocido. El 12 de diciembre de 1986, el templo fue reconocido como reliquia histórica y arquitectónica nacional.