尽管如此，武则天的家庭在当时也还是不入上流社会的“寒族”。武则天的父亲靠做木材生意致富，后结织李渊，在晋阳起兵以后，李渊命他为行军府司铠参军，一直为唐军提供军需，直到唐军进入长安，被李渊尊为“太原元从功臣”。然而，这并不能改变他的家族出身，按当时的门阀观念，所谓名门望族，是在一百多年间一直控制着西魏、北周和隋、唐政权的关陇集团，只有出身于这些家族的人，才能获得朝廷的承认，才有资格在朝廷中担任重要的官职。按武则天父亲的资历和官位，当然可以跻身于士族之列，但论其血统出身，却是寒微之族。唐太宗贞观十二年（公元638年），朝廷修《氏族志》，不列武姓，“不叙武氏本望”，社会上也攻击武家是下等族姓，甚至连突厥人都称：“武，小姓。”武家被排斥在贵族之外，想取得很高的权力和职位，是十分渺茫的。
武则天就生长在这样的家庭里，既有着上流社会的荣华富贵，又有着寒门微族的“历史出身”。上流社会的生活刺激了她的权势欲，寒门微族的出身又使她无法实现攫取权势的欲望。武则天自小就在这种矛盾的心理状态下长大，逐渐养成了她那种仇视名门士族、不择一切手段地攫取权力的性格特征。的确，在她的身上，是看不到多少“贵族气质”的。