Lễ hội chùa Bắc Nga là lễ hội tiêu biểu được tổ chức vào ngày 15 tháng Giêng hàng năm. Trung bình mỗi năm, chùa Bắc Nga đón hơn 15.000 lượt khách tham quan, lễ bái và lễ Phật. Lễ hội gồm hai phần; Phần lễ có các nghi thức cúng tế trong chùa mời Tiên mời Phật về phù hộ cho dân chúng được bình an hạnh phúc. Phần hội bao gồm có múa sư tử, thanh niên nam, nữ rủ nhau lên các triền đồi hát giao duyên với các làn điệu sli, lượn đặc trưng của dân tộc Tày, Nùng ở Lạng Sơn.

Theo các tài liệu lịch sử ghi chép lại, chùa Bắc Nga, xã Gia Cát, huyện Cao Lộc được xây dựng khoảng cuối thế kỷ XIX đầu thế kỷ XX, khởi đầu là ngôi miếu nhỏ được các công thần, văn sĩ dựng lên để thờ Tiên gắn với câu chuyện các nàng tiên nữ xuống nơi đây. Khi khởi dựng, chùa được xây dựng bằng gạch, mái lợp ngói, gồm 1 gian tiền tế thờ công đồng và 1 gian hậu cung thờ Tam Bảo. Chùa còn lưu giữ được một số hiện vật quý như các bức hoành phi, đôi câu đối, bát hương cổ, văn bia ghi lại việc trùng tu chùa… Năm 2002, chùa Bắc Nga được Chủ tịch UBND tỉnh xếp hạng di tích cấp tỉnh, thành phố;  từ năm 2016 đến năm 2020, UBND xã và Ban Quản lý chùa đã vận động, kêu gọi nguồn kinh phí xã hội hóa để trùng tu, tôn tạo một số hạng mục của chùa như: lát đường lên chùa, làm đường và sân bê tông, trát lại tường, sửa ngói, lát lại nền xung quanh chùa… với tổng kinh phí hơn 1 tỷ đồng.