南宋末年仁十公讳侧心由余干县城东迁居上仓，第三世孙瑞十余公讳元久，至元朝十年（1278年）迁居进官堂即老屋居住，当时属余干县管辖与王姓同居，许姓日益蕃昌，而王姓自愿南北迁离，另立村名为羊家村、前羊村。许姓改名为羊坊村，直至清乾隆48年（1778年）许应宗先生曰：“羊坊非佳号也，胡可以坊而羊之？应字为扬芳，斯可以弘扬而流芳百世也。”明正德七年（1512年）因爆发王浩八农民起义和陈武魁叛变，余干县、波阳县、乐平县、贵溪县鞭长莫及对山区现万年难于治理，御史割四县边缴而立万年县，扬芳村邃属万年县管辖。
又据谱版志载，勉二公幼女适嫁淮王，淮王率兵马数千来扬芳认亲，仅五天青划被马队吃光，羊群一时间饥荒，在更名之前，因有羊荒之说。
村人为表准王的光监，在村国心特植槐（淮）树一株，以作荣耀的纪念。
此树因立大路边，年久经磨历劫，树尖长至三米复辄向地面生长，触地后，又转向朝天滋长，因有一槐三树之称，被称为八景之一。村民为保护槐树，四围环篱，肥水施灌，春华秋实，十分繁茂，三百余年，亭亭如盖。
村人有此树而感自豪。过往文人墨客无不高赞奇称，诗、词、赞文，不计其数。
其后，勉二公女生子，称为黄娘。死后，勒葬本县乌？尾，至今二十世纪八十年被盗墓，珠宝、金银及其其它殉葬品不可胜计。勉二公共生六子，惟长子璇三公讳世宽，首居老屋白果树，后迁大屋堂，即今之新屋村。因其人胸怀开阔，志略过人，自幼甚得父之爱，家殷富，世称璇十万，璇三公为新屋村始祖。至此，扬芳遂有老屋、新屋之分，
大明成化四年（1468年）大旱岁饥，璇三公以谷千石赈济当代，获皇赐义民二字，于村中心建一亭，称为义民亭以表之，此亭建造古雅别致，分上下两层，分层之间，左右悬挂皇封义民亭金匾两块。红顶黄檐，八角朝天，雕花紧致，当代人称于圣旨亭，咸称龙亭，二百余年后，于1666年经康熙之变，此亭遭毁。当时，即有人称此为荒亭、草亭云，又越二百余年，至民国戊午年，前清禀生许元升字羊贞，应众议于原址复建一亭，亦获万年县署赠送义民亭匾二块。1972年在破旧立新运动中，此亭中被拆除。文化大革命后，众议此亭不可少，乃集体重建一亭，称为凉亭，如今往来商贾，学生集伴，众事商讨，老人闲聊，均集于此。昔日许球先生称道此亭说：“虽醉翁，丰乐有过人之而无不及”。
15世纪中叶，扬芳虽有老屋、新屋之分，但亲如一家，由于枝繁叶茂，按支派划分为十房、老屋五房、新屋二房，繁衍尤为昌盛，除外迁者，现共有住户二百一十家，此二百一十户两村使得其半，老屋除大房五户外，均属五房后裔，新屋除三、六、九、十房10户外，均属二房公后裔。第四、七、八房均后继无人。约明朝末年，老屋村建五房公祠于村正中，面对戏台。新建二房公祠于前坂，每值春（清明节）冬（冬至）二祭，集全村之后裔汇聚一堂，炮轰、烛亮、香烟袅袅，祭敬祖先。明弘治末年新屋村建璇三公祠于大屋堂，前后两进屋高且大，每年清明节冬至，受新屋全村人祭拜。明嘉庆年间，新屋村众建接云峰庙，因山势高耸入云而得名。清咸丰年间，兵？成炭越一年庚申岁（1860年）合众又复重建，许养贞先生设帐于庙，并设立经学堂于庙，四方弱冠子弟，咸负笈于此。先生慕山势磅礴，风景秀丽，于咸丰十一年（1861年），迁居于庙之下——唐道坞。1931年土地革命时期，此庙被毁国民党烧毁。
明万历五年（1577年）老屋村三十世孙许解信，忘纷华惟清净以洁己，将一己之山园田地，改创霞湾水转东流之上峰，建一庵宇，山势如江汉，朝宗于海遂名之谓海会庵云。建成后，与接云峰隔三里许，相对峙立，其暮鼓晨钟，遥相呼应，康熙甲辰年（1664年）我族后裔众议，只分支祖先祠，而上自知柔公，下至伯六公均未建祠宇，子孙无地缅怀先祖，于是石峡无旭，扬芳新屋玉铉、首州、老屋村绍祥及小赞村，上下仓首士，决议于新屋村龙山下创建许氏宗祠，由扬芳老、新屋石峡三村捐资，按文公三栋祠堂图以营之，四周围墙三十八丈，前后三进，屋里两天井，天井两厢房为通道，屋高一丈九尺六寸，？高二尺，柱大一圈。乾隆丙子年（1756年）又添建庖？（厨房、浴室）落成之后，丰始祖尚书知柔公、中宪大夫伯六公及列祖位牌画像，于正堂以祀之，地面铺青条石，上悬孝悌忠信四个大字，庄严肃穆，一时被誉为万年第一祠。三族捐田二百三十亩，以备三县同宗祭祖大会烹炊之需，每年清明节，云龙公之后裔，事先确定为扫墓队，为列祖扫墓，每年冬至节，各族首士，年满六十以上高龄者，可带车役一人，中小学毕业者弈可带车役一人，大学毕业者，可带桥役二人参加冬至宴会。时间两天，第一天先祖之高风亮节。第二天下午散会时，按上述人员等次发放助肉二斤、四斤、十六斤，每年春节按人丁及以上等次人员领取圆饼——年头饼。自元月一日元宵节十五天，祖先堂日夜灯火通明，香烟不断。
清之道光末年，碧玉公后裔许心织，家豪富，有良田三百亩，生子起生，年逾二十，娶妻后暴死，心织年五十余娶继室，连年生二子福生、德生，老人喜不可喻，于是修身养性，行善积德，乐意施舍，建文武学堂，延师坐馆，村人子弟入学，喜迎而不费取。又于村中心大路上建石路一百三十丈，两旁砌石英，中间铺平面青条石，以后，尽管阴雨连绵，大道从不泥泞。
1926年，成立中共万年县第一个支部，胡涣生为首任书记兼宣传委员。他家住扬芳境内，黄土彪任组委员，他们随时在扬芳宣传马列主义，宣传无产阶级革命。1982年方志敏来万年宣传革命并委派邵武平在扬芳许氏宗祠设立万年、余干、余江三县革命指挥部，除万年县城外，先后爆发了蓬蓬勃勃的农民暴动，1930年，红军缺盐，组织红军，游击队六百人去余干接盐。在邹元与余干国民党队伍一百余人相遇。接仗之后，国民党全军覆没，红军满载咸盐胜利归来。南天万年县国民党军队亦有一百余人，来扬芳许氏宗祠进行清剿。到扬芳后，得知红军已去余干，即向余干方向扑来，妄想一举歼灭。而凯旋的红军亦得知国民党已来扬芳，做好了充分迎战准备，两军正于檀树岭相遇，国民党军队见红军人众势大，丧魂失魄，翻身逃遁。红军紧追不舍，两军在扬芳牛屎坂展开了激烈的血战。最后国民党军伤亡十之八九，至第二年春耕时杨家山下晚田里仍有一具全身戎装德国民党军的尸体。1931年国民党军出于对红军的报复，调来两个团的兵力，又来扬芳扫荡。闻讯后，红军已将许氏宗祠德机关人员转移余干，国民党军队即将晒谷？四十床，依竖在祠堂屋内，烧油纵火，反扣门环，其始围墙坚固不透气，瓦厚不通风，火焰漫？橡焖烧，其后火光突然从两个天井爆了出来，两根大火柱在热空气德推动下，越烧越炽，就这样烧了一昼夜，一栋祠宇大厦化为焦土。这一次土地革命直至一九三四年红军北上为止先后八年里，扬芳多次成了战场，为革命牺牲了十六个烈士。
清光绪乙酉年（1887年）二房公后裔分别建泉玉公祠、碧玉公祠两栋，前玉公祠建于花门楼，分前后两进，前一进左（1887年）寄附建璨丽公祠。碧玉公祠寄附于二房公祠左侧，以上祖祖先祠均于50年土改时分配给贫丁中农。
自明清以来，宗谱联修是立身处世德大事，乐平、波阳、余干、万年、余江四十多许姓村庄，均系尚书知柔公德后裔，互相往来频繁。解放前常以玩灯，演太子班戏，作为串宗访祖德工具，以是彼此情感日益亲热。余干之长山、上林、蝉林、石峡、万年之扬芳老屋、新屋、小赞、余江之彬江、路边、大田、历来联修宗谱，每二十年一修。至于扫墓祭祖、济贫、救灾，及其其它众事计议，均以扬芳村为中心。最后一次修谱，是1938年，在老庄山下做好平房八间，以供修谱专用，是为谱局，1939—1940年10月，才完成八村以苏修形式的谱牒。庆典时，颇为隆重，迎来名戏班“同春舞台”，高扎花团锦簇德台面，宰猪30头，开宴百席。晚间梨园子弟戏布，吊辫，放盆花，烟花，持续六昼夜。最后一日，十二把轿子抬十二箱珠红，赵体书写的余、万、安许氏宗谱，上插始祖及列祖画像。队列按大会首士、命官、名士、宾客、寿星、学生、大会工作人员为顺序，十个乐队、二十个鸣炮放铳硝的夹插在游行队伍之中，鼓乐喧天，鞭炮齐鸣，披红挂彩，热闹异常，这样绕扬芳十里一周，是谓之出谱。
1860年，太平天国翼王石达开的部队，由余江县经万年县北上，至本乡烧桥村误途来扬芳五十余人在村中宣传太平天国政策。推翻满清统治。特别在服饰上强调复汉。强令男人去发鞭。妇女去裹脚带。当时有不少青年人响应了这一号召，但也有不少中老年人爱之如命，溜之大吉。革命失败后，清政府清查长毛分子，有云登、陆祥等青年人被查获，墙令罚劳役一月，写悔过书，张贴示众，至今仍有“鞭子悔过”的传说。
1942年，日寇已侵入我省，到处烧杀掳掠，奸淫妇女，空中“黑士”形的飞机，群魔似得划过山头，炸弹轰炸，机枪扫射，河里的汽船不分昼夜地吼呼，十分嚣张，到处人心惶惶，鸡犬不宁，5月2日，日寇一百余人，侵入我乡射林村，枪杀一人，伤八人，烧民房十五栋。六月四日，又侵入烧桥村，打死一人，抢夺财物无数上述两村与我村皆本乡大村，鼎足距离只有五—八里，扬芳村幸免于此。但牲口宰尽，田地荒芜，盐价暴涨至一担谷一斤，多数群众煎硝盐度日。日寇每入侵，总在天亮之前，或在黑夜进行，全村人所以露宿密林四十余天，村里竟像一座阴暗的地府。
1945年—1949年，苛捐杂税，抽兵抓夫，日益增多，全村37人服兵役，其余兄弟多的，只有离乡背井，剩下翁妪妇幼在家抵挡差役催命的苦难，曾一度萧条冷落，苟延残喘而挣扎度日。
1946年国民党政府沿收各类会田四百亩为公产田，租谷七百余石，（市斛）交三民乡公所。
1949年4月23日，万年县县长肖子明率保安团、警察队逃离万年，四月二十八日（农历四月初一）解放军第二野战军击败南逃德国民党军队，解放了万年县。五月四日成立万年县人民政府，许嘉陆（东北人）任第一届县长。八月，我村开始清匪反霸减租减息运动。
1950年土地改革，没收国民党公产田，其它封建土地及地主阶级土地740余亩，全面丈量土地，稻田分上中下九级，旱地分上中下三等，平均（按人口）每人分得稻田二亩一分。八月，开展扫盲运动，成年人参加速成识字法学习，鼓腰队，秧歌舞，赛歌会，现代戏，村里活跃空前。
1958年，正月初一，全村400仁顶风冒雨，积肥，修水利大跃进开始。
九月百分之七十德劳动力参加炼钢铁。九月下旬，全区四千劳动力建筑横溪水库，奋战秋冬雨季，宣告成功，长5.5公里，坝高14.5公尺，水库总容量五百六十万公方，可灌溉农田四千亩，占新屋村稻田一千亩。
1958年下半年—1959年九月，新老屋两村分别起两个大食堂，吃大国饭。1960年，县水电局拨渡船一只给横溪水库，用以解决余干、万年两县人民往来和扬人农作柴樵的困难，1981年在新屋村口即横溪水库中断，再筑一条堤坝，方便人来人往，取消渡船，堤上段新建百亩面积的珍珠场。
建筑横溪水库以后，耕地面积减少，由政府组织安置，人口外迁。自1961年——1966年，先后从新屋村迁出五十一户。
1980年土地承包到户以后，全村人民生活大有提高，自老屋至新屋一条公路计一里，沿路房屋林立，坐落有致，楼房如雨后春笋，电灯似天街繁星，车辆如梭，机器轰鸣，一一换了人间。
