这样一来，赵恒身形逐渐憔悴。
赵匡义见三皇子赵恒憔悴消瘦，就问赵恒的乳母，问她皇子身边有何人？
那乳母不喜欢刘娥，就把刘娥入府的情况说给了皇帝知道。
赵匡义闻听皇子与出身微贱且来历不明的民间女子厮混，登时大怒，令赵恒将刘娥赶出王府。
不久，赵匡义又为赵恒赐婚，新娘系出名门，是宋朝开国功臣潘美的女儿。
赵恒不敢违抗父皇之命，又难舍刘娥，遂将刘娥秘密安置在王府指挥使张耆家中，不时私会。
张耆见是皇子极爱之人，侍奉刘娥甚为谨慎小心。为避嫌，张耆从此不敢回家居住，在外面另选了一处宅子安身。
刘娥自此过上了小三的日子，虽然赵恒时不时来和自己幽会，但是，日子过得像做贼一样，她渴望着改变这样的生活。
她不断地熬着，一直到了至道三年，公元997年，宋太宗赵匡义驾崩，太子赵恒承继大统。
赵恒即位之后，立即将刘娥接入宫中，但后宫已经有了郭皇后和其他一众嫔妃，刘娥并无名分。
