中山会馆旧址相传为明代权臣严嵩的花园别墅。此园分前、中、后院。大门内是一座木影壁，其后便是大客厅，客厅的四周有回廊环绕，另有魁星楼、戏台、假山、亭树、水池、小石桥、什锦窗院墙等建筑。中山会馆的前期是广东香山会馆，由唐绍仪创办，后更名为中山会馆。广东青年会曾在此活动，后来又在此成立了“中山少年学会”。