ถ้ำภูมวย เดิมเรียกว่า ถ้ำภูน้อย บริเวรดังกล่าวมีไม้ที่ใช้ทำที่นึ่งข้าวเหนียวที่เรียกว่า "มวย" ขึ้นหนาแนน ชาวบ้านก็ไปตัดไม้ทำมวยที่บริเวณนี้ จึงเรียกต่อกันมาว่า "ถ้ำภูมวย " และชาวบ้านยังมีความเชื่อว่าเป็นสถานที่ศักดิ์สิทธิ์ จนปัจจุบันสำนักสงฆ์ได้ไปตั้งเป็นวัดถ้ำภูมวย