相传唐初刘武周、宋金刚被唐军战败从太原向突厥部北逃，唐朝一王子指挥几支军队追至河曲唐家会一带会合，又与几个投诚的突厥首领在此会盟，后定村名为唐家会。今村西南边墙方台墩东北叫唐王坡。村西北有宋代旧土城堡称“旧堡子”。庙产权属唐家会村五里的道观寺庙岱狱殿始建于金朝皇统元年（1141年）说明当时唐家会已成为较大的村堡。其时居民以捕鱼、牧羊为主，农耕次之。明代余子俊增筑边堡，村西筑边墙，城堡南筑边墙，呈丁字形走向，边墙蜿蜒经过唐家会约20余里。东南段出口依次为水门口、暗门口、斩贼口。水门口与暗门口旧有官渡口一处，平时设官俸水手二名，渡船二只。北通宣府、大同，西通陕西榆林、宁夏。村北梁旧有古烽堠墩，今称黑土墩。 <div> 清道光版(河曲县志）载：“唐家会堡，县东南10里，明正统间（1436-1449）建，周围一百三十步，设操守一员，军二百名，后添七十四名。明武宗乘船钓鱼于次。国初（大清）设防守一员，守兵一百名，马二匹，今制设把总一员，兵五十名，马三匹。有储粮社仓。”明中期唐家会堡营兼行政地方职能，居民向堡外拓展。与河保营、巡检司为县内“地方行政（相当于现乡镇），称唐家会地方。辖15个村：柏沟营、大东梁、水草沟、水壕沟、铁果门、坪泉、四滩坪、唐家会、焦尾城、科村、晏峁、岱狱殿、罗圈堡、河湾、赵家口。唐家会东岗上有较大的观音殿（在公园东侧），城堡东有关帝庙，城堡南有五道庙、菩萨庙、马王庙、河神庙；南城上有魁星阁，南翁城内有火神庙；城堡内有龙王庙、城隍庙、真武庙，近代全毁。</div><div> 《明史纪事本末》载：“正德十三（1518 年）九月，幸大同，时乘一马，侍从卤簿等，由郡境历老营堡，至偏头关。轻骑戎衣，顾关而曰：‘此是偏头关耶！’是月二十四日，为帝‘万岁节’，从臣皆贺。明日雨雪，驻跸。十月初四日，幸楼子营，已漏下二刻，旌旗夹道，灯火烛空，山川震动。明晨从娘娘滩、太子滩抵灰沟营（今河曲县城），始进午膳。因幸唐家会，祭河神，诏善游者，观之。民李应祥应诏，连浮两次，上喜，赐酒。遂登舟击楫中流，抵西岸，幸榆林。以西风恶，回驾。是日，秦、晋两藩咸集，车骑云屯，声震山谷。” </div><div> 清人有诗赞曰：</div><div> 堡前环植绿柳稠， </div><div> 物阜民安二百年； </div><div> 明代武宗曾幸此， </div><div> 鲤鱼浪里泛龙舟。</div>