Notre histoire commence en 1875, lorsque la cour Qing fit de Taipei une ville préfectorale pour le nord de Taïwan. Une préfecture avait besoin d'un temple de Confucius digne de ce nom, et en 1879 la construction débuta à l'intérieur de la porte sud de la ville. Deux temples étaient prévus, un temple littéraire à gauche et un temple martial à droite, tous deux orientés vers le sud. Deux fonctionnaires supervisèrent les travaux : Xia Xianlun, commissaire militaire de Taïwan, et Chen Xingju, préfet de Taipei. En 1881, la salle principale, la porte Yi et le sanctuaire Chongsheng étaient achevés. Puis la gentry de Taipei proposa de lever des dons, et les travaux commencèrent sur la porte Li, le chemin Yi, la porte Lingxing, l'étang Pangong et un mur d'enceinte. En 1884, le temple fut enfin achevé. On dit que le temple s'inspire du temple de Confucius original de Qufu, dans le Shandong. Les années suivantes, pendant que Liu Mingchuan était gouverneur de Taïwan, une grande cérémonie se tint chaque année dans le temple, un événement important pour les lettrés de l'époque.