赤坎离外海较远，风平浪静，宜船只避风停泊，在宋代已是小商埠。清朝康熙年间解除了长达200年的海禁后，海运商贸迅速恢复和发展。福建商人方氏捷足先登，载货到赤坎贸易，是海上到赤坎经商的第一人，潮阳李氏则是潮州籍首个踏足赤坎的商人，他们得到当地居民友善关照，便定居下来，并不断招引同乡来赤坎经商。素有海外谋生习惯的闽浙、潮广、琼崖商人闻讯，纷纷前来做生意，邻近高雷一带商人也接踵而来，赤坎一度商贾云集，贸易兴旺。
到了清朝道光年，赤坎已“商旅攘熙，舟车辐辏”，向官府注册登记的商船达400多艘。不少商人到赤坎贸易，觉得大有商机，便安家置业，久而久之，引聚集居，自成群体。当时，潮州籍居住的人口达1000多人，闽浙的商行船号就有45家。为了便于同乡聚会、寄宿、统筹生意、议决大事，各路乡人，便捐资建立会馆，从清朝乾隆年至咸丰年间，赤坎先后建起了五大会馆，它们分别是：
潮州会馆，位于福建街（今湛江十一中内），建于清朝乾隆58年（1793年）。
闽浙会馆，位于民主路（今赤坎区人民医院内），建于清朝乾隆年间。
雷阳会馆即雷州会馆，位于关庙街（今市机关一幼内），建于清朝嘉庆年间。
广府会馆即广州会馆，位于福建街（今市四小内）建于清朝嘉庆年间。
高州会馆位于高州街（今市四小内）建于清朝咸丰2年（1853年）。
这些会馆都带有浓厚的明清时期建筑风格，四合院砖木结构，面积宽阔，布局得体，踏跺进院，梁架斗拱，飞檐出阁，庄重堂皇。也汇聚了各地民俗文化的特点和精华，把当地传统的工艺融进建筑，混成一体，木雕、石雕、砖雕、瓷雕，各具特色，精美细致，栩栩如生。潮州会馆正堂的巨型木浮雕“金枝长发叶，银树永开花”，最具优秀代表性。不少会馆都留有名人墨迹。高州会馆大门牌匾及门联，“旅馆盍簪同敬梓，海波澄镜到博桑。”是清吴川状元林召棠所题。雷阳会馆石刻门联：“雷雨经纶四方和会，阳春德泽万物棣通”。是清遂溪举人洪启元所作。赤坎各大会馆都有很高的史学价值和文物价值，可惜在文革中和日后的用地建设中被拆毁，令人婉惜。现只有各会馆根盘大地，茂叶如盖古榕树幸存，成了历史的见证。昔日各地移民，到赤坎定居、经商、开展贸易往来，进行市政建设，为开发赤坎付出了艰辛的努力，对赤坎的繁荣和发展作出了重要贡献，历史绝不会忘记。
