การก่อตั้งสำนักสงฆ์และให้ชื่อว่าภูม่านฟ้า ผู้คนต่างตั้งข้อสงสัยว่าเหตุใดจึงตั้งชื่อดังกล่าว เนื่องจากบริเวณตรงนี้ไม่มีทั้งภูเขา ตั้งชื่อเกินความเป็นจริง ผู้สร้างจึงบอกว่า “รู้ได้อย่างไรว่าที่ตรงนี้ไม่มีหิน ไม่มีภูเขา ตั้งๆ ไปเถอ เดี๋ยวก็มี เดี๋ยวก็รู้เอง”  วันหนึ่งมีพระรูปหนึ่งที่มีความถนัดเกี่ยวกับหิน จึงพากันขนหินชนิดต่างๆ มาช่วยสร้างสำนักสงฆ์แห่งนี้ขึ้น สถานที่แห่งนี้จึงกลายเป็นปราสาทหิน ตามคำบอกเล่าจากอดีต ดังคำที่ผู้สร้างได้เคยพูดไว้ในครั้งก่อน เป็นอัศจรรย์ใจยิ่งนัก

ตำนานเรื่องราวของภูม่านฟ้า ยังมีเรื่องเล่ามากมายรอให้นักท่องเที่ยวและผู้แสดงบุญไปค้นหาคำตอบต่อไป