Muốn ra đền Ngọc Sơn phải có thuyền nên năm 1865, Nguyễn Văn Siêu, một nhà thơ lớn của Hà Nội đã quyên tiền làm cầu bắc từ bờ ra đền Ngọc Sơn và đặt tên là Thê Húc (có nghĩa là giọt ánh sáng đậu lại). Cầu gồm 15 nhịp, 32 chân cột gỗ tròn xếp thành 16 đôi. Mặt cầu lát ván gỗ và sơn màu đỏ sẫm, chữ Thê Húc thếp vàng. Thê Húc mềm mại, duyên dáng như thiếu nữ, được coi là cây cầu đẹp nhất Hà Nội.
