Cạnh chùa Một Cột còn có một ngôi chùa có cổng tam quan, với bức hoành phi ba chữ “Diên hựu tự”, nguyên là công trình được dựng lần đầu tiên năm 1049, để mở rộng quy mô cho chùa Một Cột trong việc thờ cúng, tụng kinh Phật và sinh hoạt của các tăng ni (trong quần thể chùa Diên Hựu lúc đó). Kiến trúc còn lưu đến hiện nay của công trình này có niên đại khoảng nửa đầu thế kỷ 18 (đợt trùng tu năm 1847), phụ vào với chùa Một Cột.