O terreno é tão parte do sítio histórico nacional quanto a própria mansão. Dois jardins ficam em lados opostos, e cada um segue sua própria tradição. Na frente, o Jardim Sul segue um traçado formal francês. Uma fonte central é cercada por canteiros de flores simétricos e dispostos geometricamente, que ecoam a grandiosidade da mansão. Atrás do edifício está o grande Jardim Norte, projetado em estilo japonês. Seu lago tem o formato do caractere chinês para coração e é emoldurado por árvores. Você também encontrará um odeon, um pavilhão, uma ponte de pedra com balaustradas, mesas de pedra, pontes de alvenaria, colinas artificiais, cascatas e fontes. É um contraste tranquilo com as ruas movimentadas do lado de fora. Esses jardins silenciosos também testemunharam a história sendo feita. O Tratado de Taipei foi assinado aqui, em 1952. Décadas depois, em 14 de maio de 2009, o presidente Ma Ying-jeou assinou, neste mesmo local, o Pacto Internacional sobre Direitos Civis e Políticos e o Pacto Internacional sobre Direitos Econômicos, Sociais e Culturais. Uma casa construída em 1901 tem sido testemunha de muitas das mudanças políticas e culturais de Taiwan.