Theo thần tích, Đền Hệ là nơi thờ hai vị thần hậu duệ của các vua Hùng đã có nhiều công lao phù giúp các triều Lý, Trần, Lê chống giặc ngoại xâm, đã được phong Thượng Thượng Đẳng Phúc Thần. Đền Hệ còn là nơi thờ danh nhân Lê Cương Xuyên người Thụy Ninh thi đậu tiến sỹ thời nhà Mạc và thời Đức Khổng Tử, nhằm đề cao đạo học cho con cháu noi theo. Đền Hệ đã được Bộ Văn hóa cấp bằng công nhận cấp Di tích Quốc gia năm 1991. 

Nhằm tưởng nhớ công lao của những người có công với nước, xã Thụy Ninh đã tổ chức khai mạc Lễ hội truyền thống với nhiều nghi thức đặc sắc và các trò chơi dân gian.

Lễ hội đền Hệ diễn ra trong 3 ngày từ 10 tháng 3 âm lịch đến hết ngày 12/3, thu hút hàng vạn khách tham quan du lịch. Đây là một trong những hoạt động thiết thực nhằm tạo không khí vui tươi phấn khởi, lành mạnh, đậm đà bản sắc dân tộc trong đời sống dân cư.