Ban đầu, đền là một ngôi miếu thờ một vị tướng - đức thánh có công đánh giặc, và là một thầy thuốc giỏi chữa bệnh cứu dân. Ngôi đền đã cùng với nhân dân địa phương trải qua bao thăng trầm của lịch sử, năm 1938, nhân dân đã xây dựng lại đền khá lớn. Ðền có đôi câu đối bằng chữ Nôm như sau: Khí chính ngàn thu nền cửa tướng/Gió hòa tám cõi đức nhà quan. Hiện đền Làng Rào ở vị trí đẹp, không gian thoáng, rộng, phong cảnh hữu tình. Từ năm 1992, được sự quan tâm của các cấp chính quyền cùng với nguồn xã hội hóa, đền được tu bổ, tôn tạo xây nên 3 tòa để hành lễ, phục vụ cho việc giữ gìn bản sắc và hoạt động tâm linh của nhân dân. Hàng năm vào ngày 11/10 âm lịch, xã tổ chức lễ hội thành kính, trang nghiêm thu hút hàng nghìn du khách tham gia.