很快，杨素回到京城，跟随炀帝驾临洛?。

炀帝任杨素为营建东京的大监。

因杨素平定杨谅有功，炀帝拜他的儿子万石、仁行，侄子玄挺都为仪同三司，并赐给他们织物五万段、绮罗一千匹，赐杨谅妓妾二十人。

杨凉战乱平定之后不久，杨素私下拜见了清妃娘娘宁远，不久宁妃娘娘终，年约二十九。

隋炀帝于大业元年(605)，升杨素为尚书令，赏赐给他东京上等府第一处，织物两千段，不久又拜为太子太师，其他职务不变。

(605年)杨昭被立为皇太子，大业二年(606年)杨昭病故，时年二十三岁，谥号“元德“

同年，炀帝拜杨素为司徒，又改封他为楚公，食邑两千五百户。

这一年，杨素死在任上。

杨玄感，平定汉王杨谅的叛乱之后，因功勋受封假楚公，位至司徒。一年多后，杨玄感担任鸿胪卿，袭爵为楚国公，升任礼部尚书。

杨昭死后不久杨素便死了，隋炀帝杨广看杨玄感的目光也越来越诡异，这让他寝食难安，于是与诸弟谋划，准备废掉隋炀帝，立秦王杨浩为帝。

杨玄感随隋炀帝征讨吐谷浑，回来时到了大斗拔谷，当时随从官员都很狼狈，杨玄感想袭击隋炀帝。他叔父杨慎对杨玄感说:“朝士的心还是一致的，皇上还没有垮台的迹象，不可胡来呀!“

杨玄感这才作罢。

大业九年(613年)春天，隋炀帝第二次东征高丽，命杨玄感在黎阳(今河南浚县东北)督运粮草。

杨玄感于是与武贲郎将王仲伯、汲郡赞治赵怀义等谋议，想让隋炀帝所在的部队断粮挨饿，因此常常逗留，不按时发运粮草。

隋炀帝军缓慢下来，派使者来逼促。杨玄感扬言说:“水路有很多反贼，不可前后而发运。“

杨玄感的弟弟武贲郎将杨玄纵、鹰扬郎将杨万硕，都随军到辽东，杨玄感偷偷派人召他们回来。

六月杨玄感扬起了有反叛的大旗。

八月初一日(8月21日)，杨玄感死于葭芦戍。

杨玄感起兵为时虽短，但他严重削弱了隋统治势力，促进了农民起义，为以后的李渊起事打下了基础。

义宁二年(618)三月，右屯卫将军宇文化及，虎贲郎将司马德戡，元礼，监门直阁裴虔通，将作少监宇文智及，武勇郎将赵行枢，鹰扬郎将孟景，内史舍人元敏，符玺郎李覆、牛方裕，千牛左右李孝本，孝本弟弟孝质，直长许弘仁、薛世良，城门郎唐奉义，医正张恺等，率勇猛敢死的人作乱，进犯皇宫。

杨广驾崩于温室，时年五十。

萧皇后命宫人拆掉床板做棺材埋葬皇上。

宇文化及离开皇宫之后，右御卫将军陈棱在成象殿奉侍杨广的灵柩，将他埋葬在吴公台下，入殓之时，杨广容貌好像活着似的。

李渊平定江南之后，准备将隋炀帝改葬于雷塘，开棺之时，内无一物炀帝杨广的生死便成了一谜。