Cho đến bây giờ, ở vùng Ích Hậu, huyện Lộc Hà, tỉnh Hà Tĩnh vẫn còn lưu truyền về giai thoại của vị tể tướng Nguyễn Văn Giai. Chuyện kể rằng, thuở hàn vi, một lần tể tướng Nguyễn Văn Giai đi tắm nhưng bị mất trộm hết quần áo. Sau đó, ông được 1 cô gái lén để cho mảnh vải để đóng khố mà trở về nhà. Về sau, khi đã đỗ đạt, ông hỏi cưới cô gái ấy về làm vợ để trả ơn.