ในปี พ.ศ.2518 วิทยาลัยเทคนิคภาคใต้ ได้เปลี่ยนชื่อใหม่เป็น “วิทยาลัยเทคโนโลยีและอาชีวะศึกษา” วิทยาเขตภาคใต้ และได้รับจัดสรรงบประมาณให้จัดสร้างอาคารหอสมุด โดยเป็นอาคาร 2 ชั้น มีพื้นที่ประมาณ 850 ตารางเมตร โดยเปิดให้บริการเมื่อวันที่ 1 พฤศจิกายน พ.ศ.2518 โดยใช้ชื่อหน่วยงานว่า "แผนกห้องสมุด"
ปี พ.ศ. 2535 แผนกห้องสมุด ได้รับจัดสรรงบประมาณในการปรับปรุงอาคารหอสมุด ทำให้มีเนื้อที่เพิ่มมากขึ้น เป็นพื้นที่ประมาณ 1,923 ตารางเมตรและมีจำนวนที่นั่งอ่านหนังสือประมาณ 200 ที่นั่ง
และในปี พ.ศ. 2547 แผนกห้องสมุดได้มีการจัดหาระบบห้องสมุดอัตโนมัติ (Alice for Windows) มาให้บริการยืน-คืน และสืบค้นข้อมูล
ต่อมาในปี พ.ศ. 2549 แผนกห้องสมุดได้ย้ายไปสังกัดสำนักวิทยบริการและเทคโนโลยีสารสนเทศ ตามกฎกระทรวงจัดตั้งส่วนราชการในมหาวิทยาลัยเทคโนโลยีราชมงคลศรีวิชัย กระทรวงศึกษาธิการ ซึ่งประกาศในราชกิจจานุเบกษา เล่ม 123 ตอน 118 ก หน้า 27-29 วันที่ 27 พฤศจิกายน พ.ศ. 2549
ปี พ.ศ. 2550 มีการปรับเปลี่ยนโครงสร้างองค์กรเป็นงานห้องสมุด ฝ่ายวิทยบริการ สำนักวิทยบริการและเทคโนโลยีสารสนเทศ และในปี พ.ศ. 2551 มีการเปลี่ยนแปลงโครงสร้างการบริหารงานโดยรวมกันกับงานเทคโนโลยีสารนิเทศ และงานผลิตสื่อตำราเรียน แล้วเปลี่ยนเป็นฝ่ายงานวิทยบริการและสารสนเทศ โดยมี 3 กลุ่มงานคือ กลุ่มงานบริหารทั่วไป กลุ่มงานห้องสมุดและกลุ่มงานเทคโนโลยีสารสนเทศ
ปี พ.ศ. 2556 งานวิทยบริการและสารสนเทศได้มีการปรับเปลี่ยนระบบโปรแกรมห้องสมุดอัตโนมัติใหม่เป็นโปรแกรมห้องสมุดอัตโนมัติ WALAI Auto Lib
ปี พ.ศ. 2562 งานวิทยบริการและสารสนเทศได้มีการปรับเปลี่ยนโครงสร้างกลุ่มงานภายในใหม่ เพื่อให้สอดคล้องกับพันธกิจและการให้บริการของหน่วยงาน โดยแบ่งออกเป็น 4 กลุ่มงานคือ กลุ่มงานบริหารทั่วไป กลุ่มงานห้องสมุด กลุ่มงานบริการ และกลุ่มงานเทคโนโลยีสารสนเทศ