西港區圖書館於民國73年07月配合西港鄉綜合大樓動工興建，74年10月30日竣工，79年09月14日經台南縣政府79.9.14府教社字第116158號函核准立案，當年10月01日開館。

本館原位於該大樓三樓，為提供民眾優質的閱讀環境，100年縣市合併後向教育部及市圖申請經費補助，並於101年著手辦理圖書館整修。103年正式啟用，把閱讀空間擴大為三個樓層，且為讓閱讀環境更加便利及圖書上的分齡分眾，104年申請「閱讀環境優質化改善工程」設置無障礙電梯及青少年專區，於106年8月1日起重新開放三樓青少年專區閱覽空間。

經歷圖書館閱覽環境優質化及圖書空間上的分齡分眾，冀望透過閱讀等相關活動，與學校、機關、社區及企業上的相互合作，多元化的使用圖書館，建立永續經營及學習態度。