隋文帝夫妇一直想要更换太子，虽然朝堂上下支持者也甚多，看上去这件事儿已是大势所趋了。但是朝堂上还有一个最重要的人物，对更换太子这件事儿始终没有发表过任何意见，这使隋文帝心里一直很忐忑，才让他迟迟没有做出决定。这个人就是老宰相高炯，高炯可是当了二十多年的老宰相，在他执政期间，他和隋文帝一直是同心同德，两个人在大事儿很少有过大的纠纷。
隋文帝为了早做了断，他便决定主动出击，试探一下儿高炯对更换太子这件事儿究竟持什么态度。有一次他和高炯一起散步的时候，他便旁敲侧击的对高炯说:我听我家晋王儿媳妇说她做了一个梦，梦到她家晋王成太子了……他的话还没说完，高炯就扑通一声跪倒在隋文帝面前，义正言辞的说到:长幼有序，不可以轻易更换。隋文帝一看到高炯持反对意见，也就只好将这件事儿暂时搁置起来。
高炯之所以提出反对意见，首先出于对公方面的考虑。作为一名有经验，有操守的老牌儿政治家，高炯非常清楚，废长立幼将会给国家带来很严重的政治斗争。轻则政治不稳，重则国破家亡，这在历史上是有很多经验教训的。所以他不希望隋朝重蹈覆辙。再加上这么多年来，太子杨勇在工作上一直是兢兢业业，有时候他的治国理念甚至高于隋文帝，从整体表现来看，他可以说是个非常称职的接班人。在更换太子这个非常敏感，也非常重大的问题上，高炯能够以大局为重，不去迎合隋文帝夫妇的喜好，从这一点来说，他还是十分有节操的。
再有一点就是高炯和太子杨勇是儿女亲家，高炯的儿子高表仁娶了太子杨勇的女儿为妻。高炯很清楚，只要他和太子杨勇有着这层关系存在，一旦新太子当上了皇帝，人家是绝对不会再用他的，这是宰相高炯反对更换太子的私人原因。正是因为有这两方面的原因，高炯就坚决举起了废长立幼的大旗，因为当时高炯的政治地位非常高，有了他的坚决维护，太子杨勇的位置，相对稳定了一点。在当时皇权至高无上的年代，高炯的这把保护伞也撑不了太久，因为高炯本人也已是泥菩萨过江自身难保了。
主要原因是因为他得罪了独孤皇后，本来高炯和独孤皇后的关系非常好。高炯本身就是出自独孤皇后的父亲独孤信的门下。高炯父子是独孤信的家臣，后来独孤信倒台，被杀之后，别的人都是树倒猢狲散了，只有高炯铭记旧情，一直不肯背弃故主。不管风云怎么变换，高炯一直是初心不改，他还一直和独孤皇后保持着交往，由此他也赢得了独孤皇后的敬重。俗话说:成也萧何败也萧何，独孤皇后如此强悍，当他喜欢高炯的时候，自然是他生命中难得的贵人。只要她有一天不喜欢高炯，乃至她憎恶高炯的时候，那么她对高炯的杀伤力，可比任何人都要大。就在这个关键时刻，独孤皇后还真就和高炯翻脸了。
主要原因是独孤皇后怀疑高炯瞧不起他。隋文帝虽然当上了皇帝，长期以来还是坚持一夫一妻制，始终只对独孤皇后一个人好。俗话说:人一直做好事不难，最难的是一辈子只做好事不做坏事。隋文帝做了一辈子的模范丈夫，在他晚年的时候，就犯了一个非常严重性的生活错误。
有一年夏天，隋文帝到仁寿宫去避暑，当时他的心情非常好，人也就很放松。人在心情好的时候，自然看到什么东西都感觉它是好的。就在人寿宫度假时，他看上了一名宫女。她发现这名宫女不仅人长得漂亮，就连气度也非常不凡，看上去就不像出自普通家庭的女孩子。他便询问了她的家世，这名宫女说他是尉迟迥的孙女。尉迟迥可是隋文帝称帝时的最大障碍，北周时期，隋文帝矫诏辅政，引起了三总管反叛，三总管中势力最大的就是尉迟迥，他当时可是没少让隋文帝操心。后来尉迟迥兵败被杀，他的孙女尉迟迥也就没入掖庭。一听到这名小宫女讲起身世，隋文帝不禁想起了他年轻时金戈铁马的峥嵘岁月了。心里顿时就涌起了胜利者和征服者美好心情，于是就临幸了这名小宫女。
就这样，隋文帝一下子便被美色冲昏了头脑，他也就忘记了曾经给独孤皇后许下的一夫一妻的诺言了，也更忘了独孤皇后的手段有多厉害了。春风得意时，同样喜欢老牛吃嫩草的隋文帝，当时便和尉迟迥的小孙女海誓山盟，并一再嘱咐等他下了朝以后，还会回来找她。隋文帝自以为对这件事很诡秘，她哪里知道独孤皇后可是六宫之主，她可是在很多地方都安插了她的的眼线，以防止隋文帝发生桃色事件。所以当这件事儿刚一发生，就很快传到了独孤皇后的耳朵里了，独孤皇后可是个杀伐果断的女强人，她立马便安排人将这个宫女给收拾了。
隋文帝下朝以后当他兴冲冲，急切切地来找这名小宫女的时候，看到的的却是一具被打的不成人样的冰冷尸体……隋文帝看到眼前惨不忍睹的情形，自然是非常伤心，非常窝火:毕竟自己可是一国之主，自己这么大岁数了，就喜欢这么一个宫女，自己都不能保全她的性命，顿时感觉自己这个皇帝当的也实在是太窝囊了。隋文帝一怒之下便离家出走了，他骑上一匹骏马，出了后花园，也不走官道，而是沿着一条小路径直往深山老林里面跑。情场失意的隋文帝骑在马背上信马由缰，一路狂奔。任由迎面吹来的寒风，一点点撕碎着他心里那段儿尚有余温的美好记忆……
皇上这么一跑，大臣们可就着急了，毕竟国不可一日无君啊！隋文帝一旦有些闪失，将会引发国家大乱，高炯和杨素深深知道事情的严重性，于是两人就赶快骑着马，策马扬鞭朝深山老林里去追了。他俩一下子追了二十多里路，才总算找到了隋文帝。两个人赶快叩马苦谏:皇帝您赶快回去吧，国不可一日无君啊……
隋文帝一声长叹:我虽然贵为天子，皇后把我管的这么严，我可是一点自由都没有啊。高炯一看到隋文帝这么苦恼，就赶快劝隋文帝:皇后不过是一个头发长，见识短的妇女，您何必因为和她生气，就抛弃天下呢！这其实是高炯在给皇帝台阶下，也根本不存在看不起独孤皇后的意思。隋文帝也自知常在外面不是常事儿，就一直磨蹭到半夜，才灰溜溜的回到了宫里。回去后，独孤皇后便赶快给隋文帝赔礼道歉，两个人也就和好如初、涛声依旧了。
本来这件事儿也就过去了，没过几天独孤皇后一打听，皇帝是被高炯说皇后不过是一妇人给劝回来的，她一下子就受不了了:你高炯不过是我家的一个家臣，这么多年我可是没少给你帮忙，你才有今天这个位置，你怎么敢在背地里说我不过是一个妇人。因此，独孤皇后感觉高炯这是在瞧不起她，从此就对高炯产生不满了。这么强势的皇后，高炯得罪她一次就够他受的了，高炯很快又从另一件事儿上惹了独孤皇后。
没过多久，高炯的原配夫人去世了。毕竟高炯是独孤皇后的家臣，她还是很关心高炯的。于是独孤皇后便对隋文帝说:高仆射年龄大了，身边没有一个照顾他的人可不行，还是给他再娶一房夫人吧。这是独孤皇后的一番美意，隋文帝也将这话儿传达给高炯了。高炯听了以后感动的是老泪纵横:我已经老了，回到家里，我就吃在念佛，其他的啥事儿都去想了，也就不想再找了。独孤皇后看到她念念不忘去世的夫人，被他的一席话给感动了，对他的印象也就加分了。