โรงเรียนสตรีวิทยาสมาคม  ที่ตั้งอยู่บ้านขยอง  หมู่ที่ 5  ตำบลตาตุม  อำเภอสังขะ  จังหวัดสุรินทร์  เป็นหมู่บ้านที่อยู่ในแนวเขตพื้นที่ชายแดนประเทศไทย – กัมพูชา  เริ่มก่อสร้างเมื่อ  17  กรกฎาคม   พ.ศ.  2509  โดย ผบ. มว. ตำรวจตระเวนชายแดนและประชาชนชาวบ้านขยอง  ร่วมกันก่อสร้างอาคารเรียนแบบ  (ป.1 ข)   กว้าง  7   เมตร   ยาว  21  เมตร  ซึ่งได้รับพระมหากรุณาธิคุณจากสมเด็จพระราชชนนี ศรีสังวาลย์  มอบเงินงบประมาณ  ในการก่อสร้าง  โดยโรงเรียนสตรีวิทยา  ทูลเกล้าถวายเงินงบประมาณดังกล่าว  จำนวนเงิน  30,000  บาท (สามหมื่นบาทถ้วน)
                16  พฤษภาคม  2512  สมเด็จพระราชชนนี ศรีสังวาลย์  ทรงประกอบพิธีเปิดอาคารเรียนด้วยพระองค์เอง  โดยเปิดทำการเรียนการสอนตั้งแต่ชั้นประถมศึกษาปีที่ 1  ถึง  ชั้นประถมศึกษาปีที่ 4  มีนักเรียนทั้งหมด  44  คน  เป็นนักเรียนชาย  25  คน  และเป็นนักเรียนหญิง  19  คน  มีครู  2  คน  คือ  จ.ส.ต. เพชร   วงษ์ประพันธ์  ตำแหน่ง  หัวหน้าครู  และ  พลฯ ธูป   สัญจรโคกสูง  ตำแหน่ง  ผู้ช่วยครู
                พ.ศ.  2522 ราษฎรได้รับผลกระทบจากการสู้รบตามแนวชายแดนในประเทศกัมพูชา  หน่วยงานของทางราชการที่รับผิดชอบจึงได้อพยพ ย้ายราษฎรบ้านขยองไปอาศัยอยู่ ณ ที่พักผู้อพยพชั่วคราวบ้านขนาดมอญ   โรงเรียนจึงถูกยุบเลิกไปและอาคารเรียนเกิดการเสียหายไปตามกาลเวลา
                10  มีนาคม  2530  เหตุการณ์สู้รบตามแนวเขตชายแดนสงบลง  ทางการจึงได้อพยพราษฎรกลับบ้านขยองอีกครั้ง  โดยได้จัดสรรที่ดินทำกินให้ครอบครัวละ  14  ไร่  ที่ดินสำหรับที่อยู่อาศัย  1  ไร่  พร้อมกับสร้างบ้านตามโครงการไทย – เยอรมัน  ให้อีกครอบครัวละ  1  หลัง  และได้สร้างโรงเรียนแบบอาคารเรียนชั่วคราว  หลังคามุงหญ้าคากลางหมู่บ้านในพื้นที่จำนวน   1   ไร่  โดยทางหน่วยงานที่รับผิดชอบกับชาวบ้านร่วมกันจัดหาวัสดุอุปกรณ์ในการก่อสร้าง
                8  มกราคม  2531  ตามประกาศ  สำนักงานการประถมศึกษาจังหวัดสุรินทร์  เรื่องการจัดตั้งโรงเรียนบ้านขยอง  โดยกองกำลังสุรนารี ได้จัดสรรที่ดินด้านทิศตะวันออกของหมู่บ้าน  จำนวน   150   ไร่  เพื่อเป็นสถานที่ก่อสร้างอาคารเรียน  โดยได้รับการสนับสนุนจาก   UNBRO    เปิดทำการเรียนการสอน ระดับชั้นอนุบาล  ถึงชั้นประถมศึกษาปีที่  6  ตั้งแต่วันที่  1   พฤษภาคม    2531  เป็นต้นมา   พ.ศ.  2537   ชุมชนชาวบ้านขยอง  ได้ขอแบ่งพื้นที่ของโรงเรียน  เพื่อเป็นสถานที่ก่อสร้างสำนักสงฆ์ (วัดบ้านขยองในปัจจุบัน)  ประมาณ   90   ไร่  โดยใช้แนวถนนจากสันฝายน้ำล้นไปยังถนนสายบ้านขยอง  -  บ้านคะนา 
                ตามมติที่ประชุมคณะกรรมการสถานศึกษาขั้นพื้นฐาน  ครั้งที่  1/2547  เมื่อวันที่  9  มีนาคม   2547   ที่ประชุมได้นำเสนอถึงชื่อและประวัติของโรงเรียน  ตั้งแต่การก่อตั้งโรงเรียนจนถึงปัจจุบัน  มติที่ประชุมให้เปลี่ยนชื่อจากโรงเรียนบ้านขยอง เป็นโรงเรียนสตรีวิทยาสมาคม  ตามนามพระราชทานในสมเด็จพระราชชนนีศรีสังวาลย์ และได้ดำเนินการขอเปลี่ยนชื่อโรงเรียนตาม กฎ ระเบียบของทางราชการผ่านกระทรวงศึกษาธิการ  และมีผล ตามประกาศกระทรวงศึกษาธิการลงวันที่  12  กรกฎาคม    2548  โดยโรงเรียนเริ่มใช้ชื่อโรงเรียนสตรีวิทยาสมาคมตั้งแต่วันที่  1   สิงหาคม   2548  เป็นต้นมา