旧在城东隅王十朋祠内。后祠毁，明嘉靖元年（１５２２）知县潘璜废东岳庙祀梅溪（王十朋号）并在两庑设塾。雍正六年（１７２８）县令唐传鉎将城西长春院改为梅溪书院。清嘉庆三年（１７９８）改建大门，八年知县倪本毅建文昌阁。浙南学者陈舜咨、张振夔、陈黻宸、郭凤诰等人先后在此设教。