วัดสาขลา ก่อตั้งขึ้นเมื่อ พุทธศักราช 2325 โดยสันนิษฐานว่าเป็นการรวมพลังกันของชาวบ้านในพื้นที่ หลังจากได้รับชัยชนะจากการต่อสู้กับทหารพม่าในช่วงสงคราม 9 ทัพ สมัย รัชกาลที่ 1 แห่งกรุงรัตนโกสินทร์

พระปรางค์เอน ไม่ได้เป็นแค่สถาปัตยกรรมเก่าแก่ แต่ยังเป็นสัญลักษณ์ของชัยชนะและความกล้าหาญ ที่ยิ่งใหญ่ของชาวบ้านสาขลา โดยเฉพาะ “สตรี” ในอดีต

โดยมีเรื่องเล่าสืบต่อกันว่าในช่วงสงครามพม่ารบกับกรุงศรีอยุธยา พม่ายกทัพผ่านคลองสาขลาและเข้ามากวาดต้อนชาวบ้านเป็นเชลย ขณะนั้นผู้ชายในหมู่บ้านออกไปรบหมด เหลือเพียงผู้หญิง เด็ก และคนชรา แต่พวกเธอกลับไม่ยอมจำนน ใช้เพียงไม้และสากตำข้าวต่อสู้กับทัพพม่าจนถอยร่นกลับไป

หลังสงครามสงบ ชาวบ้านจึงร่วมแรงร่วมใจก่อสร้างพระปรางค์เพื่อระลึกถึงความกล้าหาญของสตรีในหมู่บ้าน เรียกกันในหมู่ชาวบ้านว่า “อนุสาวรีย์สาวกล้า”