余杭公共藏书始于民国10年（1921），为杭县通俗图书馆，日军侵陷杭县后停办。1923年建立余杭县立图书馆，设余杭镇。1950年3月杭县人民文化馆创建，附设图书室。1956年建立杭县图书馆，后随杭县撤消而终。1961年恢复余杭县图书馆，与县文化馆合署。1987年1月余杭县图书馆独立建制，在临平新建街（今邱山大街）建成馆舍。
余杭图书馆新馆位于区南苑街道世纪大道，于2003年开工建设， 2005年11月9日建成开放。新馆占地面积8233平方米，建筑面积10931平方米，设采编部、阅览外借部、特藏管理部读者工作部、计算机信息管理部等部室，现有从业人员47人，24人具有初级以上专业技术职称，其中高级职称1人，中级职称11人，专科以上学历20人。
余杭图书馆可容纳藏书60万册（件），现有馆藏量32万册（件），其中报刊1千余种，电子图书2万余册，地方文献976种，4357册（件），线装古籍2118种，10727件，善本823册，被收入国家古籍善本总目10种，243册，有明代万历刻本《文苑三绝》、《五车韵瑞》，清乾隆年间编纂的《四库全书》、清光绪《余杭县志》、《临平记》等500余种珍贵地方史志。