杨广在父皇母后面前的表演大获成功后，又开始在大臣官吏中行动了。有一回杨广代父视察兵营，恰逢天下暴雨，兵卒们在雨中操练着，有下人举起了一把油布伞为杨广遮雨，杨广却一把推开道：“士卒们都在雨中淋着，我怎能自己躲在伞下呢。”这件事在当时被众人传为佳话，不仅隋文帝闻之心喜不已，而众大臣们也都对杨广充满了钦佩与敬重。
从此文帝夫妻两人，对晋王另眼看待。有时独孤后遣亲信左右至晋王府第探视，杨广不论来使身份的贵贱，与萧氏都亲至大门迎接，设宴款待，并送以厚礼。于是到处都是为晋王说好话的人。
杨广暗中与心腹宇文述等人密谋夺嫡。他先以重金结交贿赂大理少卿杨约，再通过杨约结交其兄杨素，获得杨素的暗中支持。又收买东宫幸臣姬威等人以为内应。
独孤后欲以晋王立为太子。杨坚因一时太子杨勇没有犯大的过错中虽欲立晋王，却不好实行。这时晋王杨广调镇扬州，不到半年便表请人觐。杨广回朝后，表现得慎言庄容，端肃安详。他对于一般朝臣格外谦和，恭而有礼。宫廷内外，都同声说他的好。
到了辞行的那天，杨广人宫别母，见了独孤皇后，他依在独孤后的膝下，泣诉道：“臣儿生性愚蠢，向来不知忌讳，时常怀念双亲，所以未及二旬，递即上表请朝。原思一见父皇与母后，藉聆慈训，哪知触忌了长兄。”
独孤后听到杨广提及太子杨勇，便问：“他敢怎么样？”
杨广惶恐说：“他竟疑忌臣儿，谓儿觊觎名器，意欲加害，臣儿因此惶恐。臣儿远列外藩，东宫日侍左右，谗惑见加，皇父容或难辨。一旦赐臣尺帛或给杯鸩，臣儿实不知身死何所。恐从此一别，便不能再见慈颜了。”晋王说着便涕泪纵横，呜咽不止。
独孤后愤然道：“我为他娶元氏女，竟不以夫妇礼待之，元氏女向来身体健全，竟会一旦暴亡，他却毫不悲伤，反与妖姬云氏淫乐。我也疑惑元氏被他所害，只是暂时容忍。现在他却越发狂妄！竟想加害你，我活着他已是如此，往后真不堪设想了。”独孤后说着已泫然泣下。
杨广佯作劝慰：“臣儿自是不肖，未能感化长兄，反使母后因此伤感，岂不是增臣儿罪戾！”独孤后安慰一番，叫他安心回去，非密诏不可进京；不得轻过东宫。晋王心中暗喜，从此独孤后废杨勇的心肠更坚决了。
太子杨勇依旧和一般宵小混在一起。而晋王杨广正在暗地进行推翻太子的计划。太子酸腐醉生梦死，丝毫不加防备。晋王的小名叫阿摩。原来杨广将出生时，独孤后梦见金龙一条，突然从自己身上飞出。初时小，渐飞渐大，直飞到半空中间，足有十来丈长短，张牙舞爪，盘旋空中，忽地一阵狂风陡起，将金龙吹到地上，跌断了龙尾，竟变成了牛样大小的一个老鼠，细看了不像鼠子。独孤后不觉惊醒，霎时腹痛临盆，产下了杨广，却生得丰颐广额，仪表不俗。独孤后将产前的异梦说了。杨坚似觉不大吉利，只是不便说出，只说金龙飞舞半空，当有摩云的志向，不妨小名叫作阿摩。
积毁成山，三人成虎。杨素与独孤后异口同声地说太子失德，内外交谗，杨坚便动了废立的主意。宫廷内外，都知了废立的消息，传到东宫，杨勇才开始着慌。他引入巫觋，做了种种厌禳术。这个消息，又被人探听了去，报告了独孤皇后，当晚杨坚也知道了。命杨素到东宫探看虚实。
杨素本是杨广的人，他到了东宫，杨勇慌忙更换好了衣冠。哪知杨素故意东看一回花草，西看一回亭台，只是挨延不去。杨勇等候了多时，不禁着恼起来，待到杨素徐行人见，杨勇怒形于色说：“公姗姗来迟，究属何意？圣上虽欲将我废立，此时究竟尚未实行，你莫自恃功高，便不把我放在眼里。”杨素佯作失惊道：“老臣该死，进了园中，一因年迈，脚步迟了些；二因贪看了园中景色，因此有劳殿下久候。还念老朽可怜，恕罪一遭。”杨勇冷笑：“说得倒好，你来此做什么？”杨素又假意微叹说：“圣上不知听信了谁的谗言，意欲废立东宫。老臣素知殿下，仁德无亏，今日特来安慰殿下的。”杨勇听了，以为杨素真心好意，不免言语之中，露出怨愤。杨素听在耳中，回到宫里，见了杨坚，便一一说了出来。杨坚大怒，便在成德殿上，召集了百官宣诏废杨勇。过了数日，即立晋王杨广为太子。
第二年的八月中秋晚上，独孤后一病去世，年未五十。杨坚自从独孤后殁后，为结发妻子办完丧事，便以年逾花甲之高龄，奋起余勇，接连召幸陈宣华夫人与蔡容华夫人。陈宣华夫人原是陈后主的妹妹，生得国色天香，闭月羞花。蔡容华夫人也是南国佳人，一样风流娇媚。二人杨坚哀叹道：“畜生何足托大事，独孤误我！”
早已人宫，文帝也早有意，只是以往碍于独孤后而无缘得幸。从此隋文帝日日欢宴，时时歌笑，比独孤后在时，放浪了不少。
有一天大雪狂风，天气阴沉，被囚禁的杨勇爬上东宫院子里的大，树，在风雪中向文帝的方向大声诉说自己的冤情，正巧文帝走出宫殿，听到了他的声音，问身边的杨素：“这是勇儿的声音，他在喊些什么？”杨素冷淡地答道：“前皇太子疯了，请陛下不用过虑。”
杨坚年老，禁不起每日床笫声色，不久染病在床，杨广趁间调戏宜华夫人，杨坚听说后挣扎起床，大骂前来看望他的杨广。但杨广矢口否认。杨坚不觉哀叹道：“畜生何足托大事，独孤误我！”然而此时已于事无补。杨广派亲信宇文述领东宫侍卫逮捕了柳述、元岩，强行逐出宣华夫人与侍疾宫女。右庶子张衡怀藏利刃，深入文帝驾前，一举结果了文帝杨坚。不久，杨广即位，是为历史上最荒淫无道的隋炀帝。
大业八年，有炼丹的术士进媚药，隋炀帝服后淫思不可抑制，一夜御女数十人。人夏的时候隋炀帝烦躁不安，每天要引饮水数百杯，却仍旧口渴。御医找来冰盘，使隋炀帝望着以治烦躁。从此后，后宫美人都去买冰制成冰盘，希望得到炀帝的宠幸，京师的冰一时涨成了天价，凡藏冰的人家，都因卖冰成了富室。
大业九年，隋场帝游江都。有个迷楼内的宫女静夜高歌：“河南杨柳谢，河北李花荣。杨花飞去落何处？李花结果自然成。”隋炀帝披衣起来侧耳倾听，他召那个宫女问：“谁教你的这首歌？”宫女说：“妾有个弟弟在民间，乡间道途儿童多会唱。”隋炀帝默然良久才说：“难道是天意么？”接着取酒自饮，内心不胜悲凉。
大业十二年，炀隋炀帝再幸江都，命越王杨侑留守。一路上炀帝每天在行走的车里御女，车窗挂着鲛绡网，缀着玉片鸣铃，车走时铃铛摇动发声以掩盖车中的呻吟浪语。长安进贡了一个叫袁宝儿的御车女。袁宝儿年仅十五，隋炀帝极为宠爱。当时洛阳进献了一种不知名的异花，花色殷紫，粉蕊红心，散发着醉人的芳菲，香气粘在襟袖上经月不散。隋炀帝令袁宝儿持花，号为“司花女”。炀帝对虞世南说：“昔传赵飞燕可以做掌上舞，朕曾以为是儒生的文字粉饰，现在得到袁宝儿，方才相信传说的不假。”
隋炀帝时期的女子骑马陶俑。此俑形态生动逼真，在隋炀帝的巡游大军中不知是否有这样的女子。
隋炀帝所乘龙舟上有舞台，台上垂着“蔽日帘”，是蒲泽国进贡的，以负山蚊的睫毛串小珍珠编成，日光不能透过。每条船上都有妙丽的女子千人，手持雕板镂金楫，号为殿脚女。一天隋炀帝见殿脚女吴绛仙滟滟独立，姿色不凡。吴绛仙善画长蛾眉，隋炀帝色不自禁，在她身边一步也不离开。从此殿脚女都效仿绛仙以螺子黛画长蛾眉。螺子黛出自波斯国，每颗值十金。隋炀帝对近臣说：“古人语秀色若可餐。像绛仙这样美色真可以疗饥了。”
日子就在温柔乡里倏忽而逝，一天，炀帝问萧后：“日月若白驹过隙，今年是哪一年？”
萧后说：“听说外边群盗蜂起，希望陛下稍以社稷为重。”
隋炀帝说：“国事一切已托杨素，人生能几何，想也无用，别说那些烦心事了。”炀帝每夜必召幸侍女来梦儿，来梦儿在床上上下迎合，极尽浪态。
萧后私下对来梦儿说：“帝身体不适，你怎么可以夜夜恣意取媚？”来梦儿说：“妾见陛下常在如意车，车摇时女自摇，妾今侍寝帐下，效仿车中之姿态以使陛下不动身子就可愉悦。”
萧后无词可驳。炀帝在扬州日夜游乐，各地的反叛势力已是风起云涌，隋朝江山摇摇欲坠。炀帝是只图眼前的快活，根本不愿知道外面真实的情况。萧后忧心如焚。一位宫女听说外间情况，便告知了萧后，萧后把这个消息转述给炀帝。不料炀帝竟大怒，将该宫女斩首。自此，萧后不再寄任何希望，其实隋的灭亡已非人力可以挽回了。当有人要报告说宫廷宿卫们也想要谋反时，萧后冷静地说：“天下事一朝至此，势已然，无可救药。不用上奏了，徒令皇上忧烦！”
一天黄昏，隋炀帝在北海泛舟，月色朦胧，晚风轻轻吹过，波浪汩汩地一层层推过去，恍惚间水上有一叶小舟，只容得下两人，起初隋炀帝以为是十六院中的某个美人。待舟到了跟前，才看见是已经被隋平灭的南朝陈后主，陈后主死去多年，但隋炀帝心意恍惚，竟忘了陈后主已死。隋炀帝起来迎接他。陈后主身边环绕舞女数十，其中一女尤其美艳，仿佛见过，又想不起来，后主说：“不认识了么？这是张丽华。”
隋炀帝请张丽华舞玉树后庭花。张丽华起来舞了一曲。后主问炀帝：“萧妃比她怎么样？”隋炀帝说：“春兰秋菊，各一时之秀啊。”陈后主又与炀帝说了一会儿话，临走时说：“我走了，我走了。一年后吴公台下相见。”说着便隐没于茫茫的水际。炀帝这才想起后主已死去多年。不由得十分惊悸。
明霞院的美人杨氏对炀帝说：“酸枣邑所进的玉李，一夜之间忽然成熟。”
炀帝沉默片刻问：“这是什么原因？”
杨氏说：“那天晚上，听见空中好像有千百个人一起喊：‘李木当茂！’第二天一看，那些李子竟然茂盛如此。”炀帝便将这些李树全部砍去。
又一夜，晨光院的周氏来奏：“院中的杨梅一夜忽然繁盛。”
炀帝大喜，问她：“杨梅的繁盛，比玉李如何？”
周氏说：“杨梅虽然繁茂，但终比不过玉李。”炀帝亲自去看，院妃献上杨梅和玉李。
炀帝问这两种果实哪一种好吃。院妃说：“杨梅虽好，但味涩清酸，比不上玉李的甘甜。苑中人多好吃玉李。”
炀帝叹息说：“恶杨好李，难道是人情天意么？”后来隋炀帝在扬州被弒前，院妃报知杨梅已全部枯死。不久炀帝便在扬州丢了江山和性命。
还有一次，打渔的在洛水获鲤鱼一尾，金色的鳞片，红色的鳍尾，十分好看。炀帝问打渔者的姓名。姓解，没有名字。炀帝用朱笔在鱼额写下“解生”二字以做标记，接着又放人北海中。后来炀帝在北海见到这条鲤鱼长已丈余，浮出水面见炀帝。炀帝当时正与萧后同看，鱼的额头红字犹存，只是“解”字没有了右边的一半，单剩一个左边的“角”字。萧后说：“鲤鱼有角，那不是龙么。”炀帝怒道：“朕为人主，岂不知此意？难道还要你说！”接着弯弓射鱼，鲤鱼沉于水中。所谓“玉李”、“鲤鱼”不过与李唐王室的“李”字谐音，当时民间流传李氏当得天下的谣言，隋炀帝对此十分反感，因此才有了砍李射鱼的举动。
大业十四年，少监宇文智与郎将司马德勘、直阁裴虔通等人，推右屯卫将军宇文化及为主，煽动士兵。于傍晚时入室杀了隋炀帝。炀帝死后，萧后叫宫女拆去床做成棺材以装殓尸体，宇文化及将他葬于江都西的吴公台下。不久李渊灭宇文化及，取得天下，建立了唐朝。到了唐太宗贞观初年，除夕时大事装点宫掖，到处灯烛掩映，宫女穿着缀满珍珠宝石的衣服笑语喧哗，殿内诸房绮丽异常，殿阶下的火堆映得庭院明如白昼。在酒乐声中陶醉的唐太宗感到很得意，便请被俘的萧后同观此景。太宗一再问萧后：“朕这里比隋炀帝怎么样？”萧氏被追问无奈，便叙述了隋炀帝当年宫内的奢华情形，太宗听了黯然不语。
隋炀帝是个极其复杂的人，他认为自己的文才在天下文士之上，曾对侍臣说：“天下皆谓朕承藉绪余而有四海，设令朕与士大夫高选，亦当为天子。”但当发现一些文士的才华竟超过他便不能容忍。他杀薛道衡时，恨恨地问说：“看你还写不写‘空梁落燕泥’！”“空梁落燕泥”是薛道衡诗中的佳句，未想到引得炀帝如此衔恨。叛乱被俘的杨素之子杨玄感死前，隋炀帝说：“‘庭草无人随意绿’，复能做此语邪！”今天想来，其性格幼稚得可笑，他杀得了人但又怎能杀得了那些巧夺天工的诗句呢。