但是杨丽华举止安详，言语态度没有曲挠服软的表示，所以宇文赟十分愤怒，于是赐杨丽华死罪，逼令她自杀。
杨丽华的母亲独孤伽罗闻讯后，急忙进宫，为杨丽华求情，以至叩头流血，杨丽华才免于一死。大业五年(609年)，杨丽华跟随弟弟隋炀帝杨广巡幸张掖时，在河西去世，时年四十九。
临终前向隋炀帝嘱托说：“我没儿子，惟有一女。我不怕死，只是深深怜爱女儿和女婿。我现有的食邑，乞求转赐给李敏。”
隋炀帝答应了她。隋炀帝回到长安后，下令有关官员置办礼仪，将杨丽华与宇文赟合葬在定陵。
由此，宇文赟成了中国历史上唯一同时立五位皇后的皇帝。不过，他最终掏空了身心，在位一年之后就匆匆告别了美丽的“五朵金花”，时年才只二十二岁。
