这座宫殿始建于东魏年间，由权臣高欢下令所建，当时的晋阳宫只是一个避暑所在，后来隋文帝时扩建，再后来，隋炀帝即位后，这位特别喜欢土木工程以及坐船巡视天下的皇帝下令再次扩建晋阳宫，晋阳宫的规模越建越大，最终成了隋炀帝比较重要的行宫之一。
这座宫殿颇具传奇色彩，因为它的存在跟大唐的建立有着直接的关系。
隋大业十三年，李渊官拜太原留守，兼领晋阳宫监，也就是说，李渊那时是帮皇帝守太原和晋阳宫的一把手，整个太原地区由他一人说了算。
权力大了，手握重兵，又是出身关陇世家，驻守着一个如此重要的兵家必争重镇，但凡是个正常人，终归心里会冒出一点诸如当皇帝之类的小理想，小憧憬。
李渊当时怎么想的没人清楚，但事实上李渊久久没有行动，直到有一天，他的儿子李世民干了一件非常坑爹的事，李世民想办法把老爹李渊灌醉，然后把他送进了晋阳宫，并且叫了一位绝色宫妃来给他侍寝，李渊当时醉得七荤八素，稀里糊涂就把那位绝色宫妃给睡了……
有个常识是必须所有人知道的，男人如果醉得真的不省人事，哪怕身边躺着仙女也是毫无知觉和反应的，李渊当时醉得那么厉害居然还有力气睡宫妃，要么就是他天赋异禀，要么……就是顺水推舟。
睡完了宫妃，李渊酒醒，看到身边**裸的妃子，吓了一大跳。
众所周知，所谓的“宫妃”，绝对只能给皇帝睡的，别的男人多看一眼都是犯罪，而作为晋阳宫监的李渊却把宫妃睡了，而且一晚上估计睡了不止一次，这个事情可就严重了，给皇帝戴绿帽子是怎样的下场？
正在惶恐不安时，坑爹的儿子李世民领着一大群人冲进宫里，踹开了大门，亲自来捉老爹的奸，破门而入后的第一句话就是“爹，你睡了皇帝陛下的女人，你完了，你死定了……”
满满的狗血套路，李渊被儿子吓得魂不附体，急问如何是好。
李世民当然不客气，马上道“你已经给皇帝戴了绿帽子，要么你亲自去给皇帝陛下赔罪，说不定皇帝陛下有喜欢戴绿帽子的爱好，一高兴就把你赦免了，要么咱们就直接造他的反吧。”(。)