长期以来,白马人没有自己的文字,却有自己的语言。据语言学专家考证认为,白马语在语音上同羌语、普米语相近似而与藏语稍远;在词汇上,不同于藏语,特别在反映农业、副业、手工业等方面的词汇较为丰富,远多于藏语,属“汉语系藏面语文”。在长期的文化交流和相互影响下,白马人的姓名基本与汉名相同,每户都有自己的姓,杨姓最大,人数最多,此外还有王、余、田、李、曹……等姓。藏名中的“扎西”、“多吉”、“达瓦”、“卓玛”……等名字,在白马人名中从未发现。正如《魏略·西戎传》所述,氐人“语不与中国同。姓为中国姓。”白马人的很多部落和家族,一般不与外族通婚,不与同姓人通婚,也不与藏族通婚;白马人的宗教信仰主要为自然崇拜,日月山水、风雨雷电及动植物等,皆为崇拜对象,虽然后来曾受过藏族和藏传佛教的影响,但影响很小。
白马人悠久的历史,独具个性的民族特色,构成了独树一帜的“白马文化”,已成为好多历史学家、民族学家研究的重点课题,引起了中外人士的极大关注。美国学者王浩曼曾著文在国外介绍:“岷山深处有一个人所罕知的部落,这个部落自称为氐人。”原始古朴的民族风情生活在我省陇南文县白马河流域的白马人,大都居住在高寒山区的向阳山坡和河谷地带,房屋依山而建,木楼彩绘,一寨一村,一户一院。白马人的服饰绚丽奇特,在中华诸民族中,只有白马人才有这种富有创造和想象的、别具一格的打扮。从头饰到发饰、胸饰、衣饰、腰饰直至脚饰,构成了一个完整而又和谐的统一体,风格独特,给人以赏心悦目的美感。