贵台镇主要古迹有革命烈士纪念碑。贵台镇革命烈士墓纪念碑的兴建是为了纪念在解放战争中保卫新生政权中在贵台地区英勇牺牲的人民解放军指战员。
张瑞贵，国民党陆军中将军长，素有“生张飞”之称。
张瑞贵 （1890～1977年） 字玉麟，钦州贵台乡那统村人。少年时给人放鸭，有“看鸭张”之称，爱习武术。19岁，往南宁酱料店打工，22岁弃工从军，先后任排、连、营、团、旅长。抗日战争期间任六十三军军长，素有“生张飞”之称。担任粤东防务。1939年至1940年两次粤北会战。曲江保卫战中他亲临前线督战。抗日战争胜利后，于1946年功月退役回钦。1947年被蒋介石委任为“粤桂南区清剿总指挥”，亲自率部回到十万山区“围剿”共产党领导的游击队，后被游击队击败。1949年，北海解放那天，张从北海逃脱，经海南岛转往台湾。1977年3月15日在台湾病逝，终年87岁。
电影外景地
1958年，由“八一”电影制片厂摄制，一部影响很大的《英雄虎胆》，就是以十万大山的剿匪为背景的，那个阴险毒辣的女匪首李月桂就是以张瑞贵的大老婆韦秀英匪首为原型。著名的女演员王晓棠在影片中扮演了女匪首的亲信阿兰小姐。《英雄虎胆》的外景主要在十万大山的贵台、平福、大菉拍摄的。
孙中山领导反清武装起义
马尸口山是十万大山诸峰中的重要山峰，与八寨沟中的八角山紧密相连。近代著名的钦州马尸口山起义（史称钦廉上思之役）就发生在这里。1908年3月27日，黄兴奉孙中山“再入钦廉，以图集合该地同志”起事的指令，在得到香港同盟会冯自由等人所备军械后，即偕黎仲宝等人率旅越华侨中的同盟会员和钦州民军200多人，组成中华国民军南军，从越南进入马尸口山，再次发动武装起义。革命军士气大振，到达大寺、那蒙与清军激战，后又转战钦州、廉州、上思40余日，历经“大小数十战，所向无前，先后破清兵逾万，而（兴）数百人中，死伤不过数人”。孙中山高度评价了钦州马尸口山起义。
