Ngôi đền này đã được các vua đổi tên, sửa chữa và tôn kính. Khi vua Minh Mạng triều Nguyễn đi kinh lược vùng Bắc Thành, ông đã đổi tên đền thành Chân Vũ quán. Ba chữ Hán ấy được khắc trên quả đá lintel phía trên cổng tam quan. Tuy nhiên, nếu nhìn tấm biển trong nhà thờ chính, bạn sẽ thấy hình thức cũ hơn, Trấn Vũ quán, vẫn được viết ở đó. Hai tên gọi cùng hiện diện, song song trong một ngôi đền. Năm 1842, vua Thiệu Trị đến thăm và cấp tiền để đúc một chiếc vòng cổ bằng vàng cho tượng Trấn Vũ. Các bia đá còn lưu lại phần còn lại của câu chuyện, ghi chép những lần trùng tu vào các năm 1618, 1677, 1768, 1836, 1843, 1893 và 1941. Công trình từ năm 1836 đến 1838, dưới thời Minh Mạng, đã tạo cho ngôi đền phần lớn diện mạo còn lưu giữ đến ngày nay. Vì vậy, điều bạn thấy không phải là một khoảnh khắc đông cứng của thời gian. Đó là một cuộc đối thoại giữa nhiều thời đại, mỗi thời đại để lại dấu tay riêng.