向日葵圖書館成立緣由其實是帶點感傷的，十年前村內一名黃小妹妹為了要還書，騎腳踏車前往鄉立圖書館途中卻不幸車禍喪命，時任德榮村幹事的李鎮衛得知後十分感慨，如果部落內有個圖書館，孩子就不用大老遠跑到鄉立圖書館借書，就是這個念頭，讓「向日葵」的種子落地發芽。
李鎮衛的想法獲得妻子蔡慧玲支持，夫妻倆決定付諸行動，李鎮衛地方人脈熟，經過多方奔走，爭取到北極殿活動中心作為部落圖書館場地，村長、社區志工媽媽著手佈置，蔡慧玲捐出家中上萬元的套書及各類雜誌刊物。
當時主跑屏北地區的一位新聞工作者侯千絹，被村民的熱情感動，工作之餘常去幫忙搬書、建檔及規劃空間，常忙到深夜才回家，並透過報紙宣傳，讓村民的努力獲得更多人支持。
經過年餘努力，這座匯集各界愛心的圖書館終於在九十二年春天開館，取名「向日葵」，藏書最多時達到六千冊，連隔壁村的孩子也來分享閱讀樂趣。
但由於圖書館地勢低，遇大雨常淹水，從開館到九十五年間圖書館淹水十多次，圖書大量流失，每當洪水退去，村民總是以最快的速度恢復圖書館，但這份堅持卻在三年前的八八風災受到重創，德榮村家園破損，圖書館也是滿目瘡痍。
屏東縣政府文化處去年一通電話再度燃起村民希望。圖資科長許世文說，自由時報披露向日葵圖書館在凡那比風災過後窘況，讓圖書館再度引起各方關注，促成佛光基金會慷慨贊助三百多萬元遷建新館，延續部落愛心。
今年六月十七日，嶄新的向日葵圖書館在地勢較高、空間更寬敞的煙墩活動中心開館，佛光慈善院院長依來法師說，新館外觀與內部設計概念源自向日葵所代表的陽光與活力，因為村民的愛心澆灌才讓它重新綻放。
兼任館長的志工媽媽孫榮秀說，有了文化處人員熱心幫忙圖書分類並建立借書電腦作業系統，新的向日葵圖書館變得更現代化，圖書傳愛的故事將在德榮村相傳。