“砦”的形成对五溪蛮具有十分重要的意义。因为他们原来散布谷间，以血缘关系组成的“邑”为单位生活。而“砦”的形成初期为 守卫用的栅栏、营垒，逐步演变成为村寨，由于后来五溪蛮并没有更高一层的社会组织，无论后来五溪蛮社会生活还是社会自治（如合款）都是以“砦”发展起来的村寨为社会组织，甚至后来朝廷对蛮地苗疆的统治，都不得不依赖村寨。
五溪蛮在“砦”内的生活，汉人的历史典籍有不少描述。
五溪蛮中土人、苗民、瑶人的服饰有所记载。《南齐书�6�1蛮传》云：“”蛮俗衣布徒跌或椎髻，或剪发。”对蛮民服饰作了整体概括。蛮族服装相差很大，有的蛮人衣青布，这种衣青布的蛮人可能是廪君蛮，也就是后来五溪土人的早期衣着。而盘瓠蛮似非如此。晋人干宝《搜神记》卷14云:盘瓠子孙“织绩木皮，染以草实，好五色衣服，裁制皆有尾形。”《后汉书�6�1蛮传》也说盘瓠子孙“好五色衣服”，“衣裳斑斓”。《隋书》卷31《地理志下》云:“诸蛮本其所出，承盘瓠之后，故服章多以斑布饰。”“这反映的是这一时期苗族先民的服饰。长沙郡又杂有夷蜒，名日莫徭，自云其先祖有功，常免徭役，故以为名。其男子但著白布挥衫，更无巾裤;其女子青布衫、班布裙，通无鞋橋。”这是描写瑶族先民的服饰。
他们的语言与与中原有很大差异。《后汉书�6�1南蛮传》云盘瓤子孙“语言侏离”;《南齐书�6�1蛮传》云:“蛮种类繁多，言语不一。”《隋书�6�1地理志下》云:“其(蛮左)僻处山谷者，则言语不通。”《后汉书�6�1南蛮传》中的“精夫”、“姎徒”、“賨布”、“幏布”等当即蛮语，汉字记音而已。
历史典籍还记载了这一时期五溪民族的典型葬俗。《隋书�6�1地理志下》云:有的蛮人实施二次葬，“始死，即出尸于中庭，不留室内。敛毕，送到山中，以十三年为限。先择吉日，改入小棺，谓之拾骨。拾骨必须女婿，蛮重女婿，故以委之。拾骨者，除肉取骨，弃小取大。当葬之夕，女婿或三数十人，集会于宗长之宅，著芒心接篱，名日茅绥。各执竹竿，长一丈许，上三四尺许，犹带枝叶。其行伍前却，皆有节奏，歌吟叫呼，亦有章典。传云盘瓤初死，置之于树，乃以竹木刺而下之，故相承至今，以为风俗。隐讳其事，谓之刺北斗。既葬设祭，则亲疏咸哭，哭毕，家人既至，但欢饮而归，无复祭哭也。”
通俗的讲就是把已经下葬十三年（化为白骨）的死者遗骸挖出，然后由女婿把白骨重新安葬等（南方民族女婿的家庭地位都很高的）。
十八世纪的《百苗图》仍然记载“苗蛮”有二次葬的习俗，只是时间仅为埋葬一两年后即取出，洗七次再埋，甚至有有家人生病后认为是先人的遗骨不干净取出再洗的，谓之“洗骨苗”
有的则行岩葬，“始死，置尸馆舍，邻里少年，各持弓箭，绕尸而歌，以箭扣弓为节。其歌词说平生乐事，以到终卒，大抵亦犹今之挽歌。歌数十闺，乃衣袅棺敛，送往山林，别为庐舍，安置棺枢。亦有于村侧瘫之，待二三十丧，总葬石窟。”
对五溪蛮各支的宗教祭祀。盘瓠蛮盛行盘瓠崇拜。干宝晋纪日:“武陵、长沙、庐江郡夷，盘瓠之后也。杂处五溪之内。盘瓠凭山阻险，每每常为害。揉杂鱼肉，叩槽而号，以祭盘瓠。俗称‘赤髀横裙’，即其子孙。”廪君蛮流行人祭白虎风俗。《魏书》卷45云:“高祖初，蛮首桓诞归款，朝廷思安边之略，以诞为东荆州刺史。令珍为使，与诞招慰蛮左。珍自悬瓤西入三百余里，至桐栖山，穷淮源，宣扬恩泽，莫不降附。淮源旧有祠堂，蛮俗恒用人祭之。”蛮人普遍敬畏鬼神《后汉书�6�1南蛮传》云:秦昭王与板循蛮“刻石盟要，复夷人顷田不租，十妻不算，伤人者论，杀人者得以淡钱赎死。盟日:‘秦犯夷，输黄龙一双;夷犯秦，输清酒一钟。’夷人安之。”《晋书》卷70《应詹传》云:两晋之际，“时政令不一，诸蛮怨望，并谋背叛。詹召蛮酋，破铜券与盟，由是怀詹，数郡无虞。”对盟誓的重视，说明蛮人对鬼神的坚信。
这里的蛮族作为一个整体仍具有一定的力量。汉民族与溪人之间的矛盾是存在的，当然这也是无可回避的。所谓“滋蔓”，是表示在三国、两晋、南北朝，是“五溪蛮”力量发展扩张发展很快。
三国时期赤壁之战以后，刘备和孙权为争夺荆州进行了几个回合的较量，在这些较量中，“武陵五溪蛮”多从蜀拒吴。在吴得荆州、有武陵之后，“武陵五溪蛮”又掀起了抗吴斗争。建安二十四年(219 )，吴将吕蒙、陆逊乘蜀将关羽北攻襄阳曹仁之机，袭江陵破南郡，并向宜都进军，时宜都诸城长吏及“蛮夷君长”皆降吴。随着江陵、宜都被孙权所克，刘备据有武陵以西之地日渐不保。同年十月，刘备旧臣“武陵部从事樊胃诱导诸夷，图以武陵属备”，孙权遣潘浚领兵讨平之。吴虽据有武陵郡地，但“武陵五溪蛮”仍是其腹心之患。据《三国志�6�1吴书�6�1潘浚传》载:黄龙三年(231)，“五溪蛮夷叛乱盘结”，潘浚等督军五万讨之，“斩首获生，盖以万数”。孙休永安六年(263)，蜀为魏所并，武陵五溪成为吴魏接界之地，亦是吴.魏必争之地，吴主以钟离牧为平魏将军领武陵太守。魏主亦遣郭纯试守武陵太守。晋泰始元年(265 ) .曹魏为司马氏所代，武陵五溪成为吴晋接界之地。晋武陵太守远驻巴东郡之南浦、表明其统治势力未能到达武陵五溪地区。据《晋书�6�1武帝纪》载:至少咸宁三年(277) “五溪蛮夷”才归附晋朝。