宴罢，杨素没有炀帝酒量大，被两个太监扶掖而去。一边走，一边口里犹喃喃骂不绝口！
有诗言，岂是为臣无上下，只缘天子是门生。
却说炀帝见杨素醉挞宫人，对萧后说，这老贼欺朕太甚，也不请旨，就叱打宫人，朕要诛这老贼九族，方快吾心！
萧后劝道，他又拥立之功，又倚兵权在手，故骄气盈。志骄者必败，气盈者必覆，且徐图之，勿激其变。
又过几日，炀帝欲派许廷辅到各地选美充宫，以供淫乐。百官有谏者立斩。
杨素因威权重大，无大事也不上朝，百官见谏言无效，就来请杨素阻止。杨素哂笑道，小娃娃，吾提携他作大家郎，如何这等胡行？大家且回，老夫自有分晓。
次日，杨素气昂昂入朝，到便殿见了炀帝，口中说，陛下江山不稳了。炀帝惊问如何不稳？杨素言，臣闻好贤则昌，好色则亡。今天子好色不好贤，许廷辅出宫选美，天下皆知皇上为淫荡之主，劝谏为先皇老臣，百官皆知天子为不正之君。百官违于上，万姓怨于下，江山如何得稳？炀帝说，我选几个美女，亦非大过。杨素言，先皇龙争虎斗，开创基业二十年，天下才如此太平。汝登基不足一年，就宣淫纵欲，驱逐谏臣，恐百官有变，言罢要辞出。炀帝言再思。杨素言，若然不悟，老臣便叫法司，拿下内使，问他个惑君罪名！炀帝料不妙，遂传旨收回成命。
炀帝忿忿不平，回宫对萧后说，杨素老贼，一味使势，全不顾君臣体面，吾必诛他九族。萧后道，皇上要亲揽朝政，慢慢削他兵权，然后杀之未迟。
炀帝北巡蓟州，返京临朝，自诩有功，杨素哂之。炀帝怒斥，汝有何功？杨素对帝及百官言，臣实无功，你当初为何屡屡下交？臣虽无功于先帝，却有功于陛下，你细细想想。言罢，竟气昂昂下殿而去。
不料一阵阴风扑面而来，忽抬头看见文帝踞殿上，满脸怒容，厉声叱曰：弑君逆贼，往哪里去？杨素吓得魂飞魄散，只在丹墀乱转。文帝骂道，朕欲立吾儿杨广，老贼不听吾言，倒转杨广来弑我，何等残忍？今不杀你，怎报此仇？举起金钺斧，照头上斫来。杨素躲避不及，一跤跌下殿来，口鼻鲜血迸流。
近侍报与炀帝，炀帝大喜，老贼已死，吾无畏也，此权臣欺君之戒也！他却不知道为文帝之报也。
炀帝对后言，前日欲造苑林，被老贼劝阻，欲选美，又被老贼阻拦，今日可以恣心而为了。遂传旨在洛阳造显仁宫，造十六院于西苑。炀帝遂在宫苑中恣行淫乐，全无忌蝉。
大隋国盛，只因杨广穷奢极欲，只短短历三十多年，就忽喇喇灰飞烟灭了！
