Nuestra historia comienza en 1875, cuando la corte Qing convirtió Taipéi en una ciudad prefectural del norte de Taiwán. Una prefectura necesitaba un templo de Confucio adecuado, y en 1879 comenzaron las obras dentro de la puerta sur de la ciudad. Se planearon dos templos, un templo literario a la izquierda y un templo marcial a la derecha, ambos orientados al sur. Dos funcionarios supervisaron los trabajos: Xia Xianlun, comisario militar de Taiwán, y Chen Xingju, prefecto de Taipéi. En 1881 se terminaron la sala principal, la puerta Yi y el santuario Chongsheng. Entonces, la gentry de Taipéi propuso recaudar donaciones, y se inició la construcción de la puerta Li, el sendero Yi, la puerta Lingxing, el estanque Pangong y un muro perimetral. En 1884 el templo quedó finalmente completo. Se dice que el templo está inspirado en el templo original de Confucio en Qufu, en Shandong. En los años siguientes, mientras Liu Mingchuan era gobernador de Taiwán, se celebraba cada año en el templo una gran ceremonia, un acontecimiento importante para los eruditos de la época.