圖書館係由黃德桐先生同意提供祭祀公業蒼聖嘗會所屬之兩筆土地做為圖書館用地。經費來源由省政府補助200萬元，縣政府補助200萬元，鎮公所自籌款199,041元，於75年3月17日動工興建，77年6月30日完工，78年6月29日開館，全面對外開放迄今。

為了讓鎮民有一座現代化圖書館，新竹縣有一座標竿圖書館，並照顧各年齡層讀者的需求，賡續客家族群耕讀傳家的精神，鎮公所於98年向教育部申請獲得經費補助，圖書館隨即進行整修，於100年3月再度對外開放，其中經多位建築及圖書館委員專家評鑑更獲得北區第三名殊榮，為此這座圖書館不但融合傳統、現代化於一爐，更積極整治周遭環境，使其兼具休憩、觀光功能為最終目標。