วัดเขาไม้เดน ตั้งอยู่บนเชิงเขาไม้เดนบริเวณนี้เคยเป็นส่วนหนึ่งของเมืองเก่า สมัยทวารวดีที่มีชื่อว่า "เมืองบน" ตามหลักฐานทางประวัติศาสตร์การขุดค้นของกรมศิลปากร เมื่อปี พ.ศ.2507 วัดไม้เดนจึงเป็นที่ศึกษาของนักเรียน นักศึกษาที่จะมาดูโบราณวัตถุต่างที่ขุดเจอและเป็นที่เคารพของชาวท่าน้ำอ้อยอีกด้วย