ศาลเจ้าพ่อน้ำดิบสร้างขึ้นเมื่อประมาณปีพุทธศักราช 2470 ซึ่งสมัยนั้นการค้าขายระหว่างจังหวัดตากกับจังหวัดสุโขทัยต้องอาศัยเกวียนเทียมควายเพราะยังไม่นิยมใช้วัว ระหว่างการเดินทางจะมีการหยุดพักล้อเกวียน และบริเวณตรงศาลเจ้าพ่อน้ำดิบก็เป็นจุดพักล้อเกวียนอีกจุดหนึ่งก่อนจะถึงบ้านด่านลานหอยและในระหว่างการหยุดพักรับประทานอาหารของชาวบ้านทั่วไปในสมัยนั้นก่อนรับประทานอาหารจะต้องนำอาหารที่ห่อมาส่วนหนึ่งสำหรับเซ่นไหว้เจ้าป่าเจ้าเขา เพื่อขอให้สิ่งศักดิ์สิทธิ์คุ้มครองตนเองและทรัพย์สินที่นำมาเพื่อให้ปลอดภัยจากโจรผู้ร้าย และก็ถือปฏิบัติกันบ่อยครั้งก็เลยสร้างเป็นศาลเล็กๆเสาไม้4เสามุงด้วยสังกะสี เพื่อเป็นสัญลักษณ์ให้ผู้ที่ผ่านไปมาได้รับรู้ว่าสถานที่แห่งนี้มีเจ้าป่าเจ้าเขาสิงสถิตอยู่และเป็นที่นับถือของชาวบ้านและผู้คนที่ผ่านไปมาจนถึงทุกวันนี้