西苑方圆二百里，苑内有海，周长十余里。海内建造蓬莱、方丈、瀛洲诸座神山，山高出水面百余尺，台观殿阁，星罗棋布地分布在山上，无论从那方面看都如若仙境。苑北面有龙鳞渠，曲折蜿蜒地流入海内。沿着龙鳞渠建造了十六院，院门临渠，每院以四品夫人主持，院内的堂殿楼观，极端华丽。宫内树木秋冬季枝叶凋落后，就剪彩绸为花和叶缀在枝条上，颜色旧了就换上新的，使景色常如阳春。池内也剪彩绸做成荷、芰、菱、芡。炀帝来游玩，就去掉池冰布置上彩绸做成阳春美景。十六院竞相用珍羞精美食品一比高低，以求得到杨广的恩宠。杨广喜欢在月夜带领数千名宫女骑马在西苑游玩，他作《清夜游曲》，在马上演奏。

炀帝游江都时，率领诸王、百官、后妃、宫女等一、二十万人，船队长达二百余里，所经州县，五百里内都要贡献食物，挥霍浪费的情况十分严重。

大业七年，杨广下诏征天下兵进攻高句丽。大业八年，隋军出动一百一十三万士兵，二百多万位民夫，却败于辽东城（今辽宁辽阳）。次年再发兵围攻辽东城。这时，在黎阳仓督运军粮的杨玄感看到“百姓苦役，天下思乱”，便乘机起兵反隋。杨广被迫从辽东撤军。杨玄感败亡后，杨广下令追究，杀了三万余人，并且籍没这些人的家人与财产。三分之二的人是被冤杀的。杨广还流徙六千余人。杨玄感围东都洛阳时，曾开仓赈给百姓。杨广命人将接受米的人都坑杀在都城以南。

大业十年（614年），杨广第三次发兵进攻高句丽，因隋末农民起义已遍及全国，隋王朝岌岌可危，最后只好议和收兵。

大业十一年（615年），杨广依例北巡长城，始毕可汗率兵将其围困在雁门（今山西代县），杨广派人向始毕之妻、隋义成公主求救，义成公主遣使告知始毕“北边有急”，加上隋朝援军相继抵达，始毕在九月撤围而去。