曹评和徽柔不能在一起的最大原因是宋仁宗担心曹家的势力过大。宋仁宗担心将女儿嫁给曹评是助长了外戚的势力。
另一方面宋徽宗听信谣言,曹评在外的名声不是很好,花心风流,贪恋美色,他认为曹平会伤害到徽柔,而李玮敦厚老实,能带给徽柔幸福。