当晚，隋文帝邀尉迟女共饮，酒过三巡，尉迟女脸上飞红，越发动人，隋文帝于是放开心情，痛饮美酒。入夜，他乘着酒兴，与尉迟女云雨了一夜。完后，隋文帝觉得非常舒服，又与她缠绵了数日，才打马回宫，处理政事。

独孤皇后躺在病床上，见隋文帝数日不回，心里起疑，于是派遣内侍打听，才知宠幸尉迟女一事，恨得咬牙切齿。他趁隋文帝在临朝听政的时候，带着宫监侍女，来到仁寿宫，抓来尉迟女，打了个稀巴烂。隋文帝临朝听政完后，听到独孤皇后去了仁寿宫，心知不好，马上骑马赶往仁寿宫，见独孤皇后仍然怒气冲冲地站在宫室里，地上的尉迟女已血肉模糊，早就没有了气。隋文帝大叫一声，转身出门，扬鞭而去。这一下，独孤皇后着了慌，连忙追出去，见杨坚骑马驰向野外，更加心惊，急忙命内侍召高颖、杨素去追杨坚。两人得令后驰马而去，追了数十里，才找到杨坚。两人翻身下马，跑至隋文帝马前，跪地进谏道：“皇上有何急事，竟这样轻身外出，难道就不顾国家社稷吗？”

隋文帝痛苦地说：“说来也羞人，自古帝王，哪个没有三宫六院，朕喜欢一个宫女，却被独孤打死，朕活着还有什么意思？想那田舍翁，多收几斗米，就想易妻，家有千金的人，就想纳妾。朕贵为天子，反而不得自由，不如出走山野，隐居山林，倒也无忧无虑。”

高颖连忙劝说道：“陛下，你戎马半生，好不容易才得天下，岂能为妇女之事，轻弃天下，独孤有错，回宫理论不迟。”

杨素也在一旁力劝。隋文帝不愿回宫，要隐居山林。正在左右为难的时候，宫中的仪仗队，还有文武百官都来迎接杨坚回宫，隋文帝才按捺住怒气，回到宫中。

车驾抵达仁寿宫的时候，时值夜半，到门口，隋文帝还是不肯入宫。独孤皇后在宫中等候多时，见状，知道自己将问题闹大了，没有办法，只得盛装出到宫门，跪地迎接隋文帝，说：“贱妾一时盛怒，触怒圣上，该当死罪，但念妾十四结发，至今已有数十年，与陛下没有丝毫嫌怨，现因宫人得罪，还望陛下宽恕。”

隋文帝面对独孤，恨恨地说：“朕非不念夫妻之情，实在是你做事太绝。”

风波过去之后，高颖劝谏杨坚的话传到了独孤皇后的耳中，她对高颖藐视女人、藐视自己的话十分反感，她曾对心腹内侍说：“我把高颖当旧交来看，不想他如此藐视我，我是堂堂国母，他怎能轻视我呢？”高颖后来站在太子杨勇这一边后，独孤皇后更是恼怒不已，于是有了贬斥高颖之心。

不久，隋文帝命令选取东宫的卫士守卫皇宫，朝臣没有人提意见，独独高颖提出反对意见，说：“如果把所有的精锐都调走，恐怕东宫的卫士会很差。”