但是，李渊早年很不幸，父亲母亲很早就离开了人世，七岁的时候李渊已经成为孤儿。这个时候，他的姨姨独孤皇后，时常替去世的姐妹完成母亲的职责，关心李渊的成长，甚至把他接到宫中取住。李渊比隋炀帝大三岁，但是表兄弟两人的地位却是不可同日而语。天下都是杨家的，李渊多少应该有一点寄人篱下的感觉吧。
不知道这两位皇帝早年一起游戏的时候，是不是李渊总受欺负。反正，后来隋炀帝即位以后，并没有给自己的表兄多少好处。反倒是，如果李渊有什么宝贝，隋炀帝就是很想夺到手。
有那么几年，李渊的官职总是不能升迁，也不知道哪里出了问题。他夫人窦氏就提醒他说，你手里那么好的一匹宝马，天下人都知道，你却舍不得贡献给皇上，皇上能高兴吗?大约过了好几年，李渊才把这个事情想明白，特意搜集宝马良驹进奉给隋炀帝，果然他的职务也得到了提升。
有一次，李渊因病没有参与朝会，隋炀帝就问，有人回答病了。没有想到，皇帝竟然说:病了?会不会死啊。这口气，分明就是盼望李渊死去。李渊听说以后，内心的郁闷可想而知。
隋炀帝对待自己的表兄向来缺少尊重，很习惯嘲弄表兄。李渊有一副慈祥的面孔，或许是皮下脂肪缺乏，面皮松软，胡须不多。
有一次朝会的时候，隋炀帝竟然当众称李渊为“阿婆面”，李渊心情沉闷，认为皇帝如此轻蔑自己，很可能自己和孩子们都会遭遇危险。好在窦氏夫人会安慰，不然李渊一定会郁闷很久。
但是，李渊的晋阳起兵，能够说是因为早年与隋炀帝的关系吗?因为长期受到隋炀帝的压制，内心充满仇恨，现在天下大乱终于有了报仇的机会，于是在太原起兵造反?
心理学习惯如此分析，然而政治斗争如果全都归因于个人心理，就不免有片面之嫌。受到皇帝的压迫，在帝国体制内，完全可以看作是正常状况，有此心理情结的决不会是李渊这样的个别人。
