相比之下，杨广的宠妃崔氏女虽然地位不及萧后尊贵，但是她的家人却因为她深得杨广宠爱，不费吹灰之力便得到了和萧家人一样的待遇。崔氏女是崔君绰的女儿，因为受到废太子杨勇的牵连，隋文帝亲自下诏将崔君绰等人杖责一百，妻子儿女家产田宅全部充官，崔氏女也因此被没入掖庭，从而得到了杨广的宠爱。
后来杨广登基后又重新下了份诏书，说崔君绰、萧严等人的罪行罪不及子嗣，免除了他们家人的惩罚，准许他们重新入仕。对此，《隋书》明确记载萧严是因为中宫萧后的原因，崔君绰则是因为女儿“入宫爱幸”——因为杨广对崔氏女的宠爱，崔家才得到了这份殊荣。此外，还有一个宣华夫人也让杨广垂涎。
隋文帝暮年入花丛，哪里经得起众多佳丽蜜蜂般的轮番吸吮，很快就精力殆尽，瘫卧病榻了。一日清晨，杨广入宫向父皇请安，恰好在回廊上与文帝的宠妃、风华绝代的宣华夫人不期而遇，好一个宣华夫人，真的是滑肤如凝脂，粉面似桃花，言语赛黄鹏，行走胜弱柳迎风，杨广不禁为之怦然心动。
心动归心动，一想到名分攸关，宫中又耳目众多，杨广自然不敢轻举妄动。第二天杨广借口就近照顾卧病仁寿宫的父皇，而住进了近旁的太宝殿，他寻机趁着宣华夫人独自入厕之际，蹑手蹑脚地跟随在后，一把抱住心中向往的丽人；宣华夫人是陈后主叔宝的妹妹，虽然国破家亡，却仍然保持着一份金枝三叶的高洁与矜待，岂肯让杨广随意胡来，她大声叱责，奋力争脱，没让这个好色之徒占到便宜。
病塌上奄奄一息的隋文帝，看见宣华夫人衣皱发乱、神色惊慌地跑回来，心想一定出了什么事，经一再追问，宣华夫人无奈地说出；“太子无礼！”隋文帝一听，不禁火冒三丈，怒骂道：“畜生！何足以托付大事，是独孤皇后耽误了我啊！”说完，又一选连声地命令身边的近臣柳述、元严道：“速召我儿来见！”并补充说：“是杨勇，不是杨广！”
深为独孤皇后生前所看重而偏心于杨广的尚书右仆射杨素听到了消息，急忙把情况告知了太子杨广，两人合谋，召来了将去给杨勇传信的柳述和元严，篡改了他们手中的诏书，并暗地里把他们两人逮捕入狱。然后又派左庶子张衡到仁寿宫侍侯病中的文帝，在杨广的授意下，张衡在文帝的汤药中投下了毒药，毒死了隋文帝。
