当初，尚书右丞李纲因为多次提出不同意见而触犯杨素和苏威，杨素却向文帝推荐李纲，任命他为刘方的行军司马。刘方秉承杨素的意旨，多次侮辱李纲，几乎将他害死。刘方回军后，李纲长期得不到调任，苏威又派李纲去南海接应林邑来降者，长久不召他回来。李纲自己回朝奏事，苏威弹劾李纲擅离职守，交司法部门审问；正逢大赦，被免官，隐居在鄠县。
五月，修筑西苑，周围二百里；苑内有人工海，周围十多里；海中建造方丈、蓬莱、瀛洲等山，高出水面一百多尺，台观宫殿，罗列分布在山峰上，无论从哪个方向看都像仙境。北边有龙鳞渠，曲折萦回注入海内。沿着水渠建造十六院，院门都临渠，每院由一位四品夫人主持，堂殿楼观，极其华丽。宫中的树木在秋冬凋谢时，就用彩绸剪成花叶，缀在枝条上，颜色褪了就换上新的，使得苑内常年像春天一样。池沼里也用彩绸剪成荷叶、菱角、芡实，皇帝乘车来游玩时，就去掉冰面布置上。十六院争相用精美的肴馔比试高低，以求得到皇帝的恩宠。炀帝喜欢在月夜率领宫女数千人骑马游西苑，创作《清夜游曲》，在马上演奏。
炀帝对待诸王恩情淡薄，多有猜忌。滕王杨纶、卫王杨集内心忧惧，就叫来术士占问吉凶并设坛祈祷求福。有人告发他们怨恨诅咒皇帝，有关部门奏请处死他们；秋季，七月，丙午日，下诏将他们除名为民，流放边远郡县。杨纶是杨瓒的儿子；杨集是杨爽的儿子。
八月，壬寅日，炀帝巡游江都，从显仁宫出发，王弘派龙舟前来迎接。乙巳日，炀帝乘坐小朱航，从漕渠出洛口，换乘龙舟。龙舟有四层，高四十五尺（注：原文“高四十五十尺”疑误，有版本作“高四十五尺”或“高四十尺”，此处保留原文数字），长二百丈。上层有正殿、内殿、东西朝堂；中间两层有一百二十个房间，都用金玉装饰；下层是内侍居住的地方。皇后乘坐翔螭舟，规格稍小，但装饰没有差别。另有浮景船九艘，三层，都是水上宫殿。还有漾彩、朱鸟、苍螭、白虎、玄武、飞羽、青凫、陵波、五楼、道场、玄坛、板鲷猓o矗扞俗忠晌“舻”或“舳”之异体）、黄篾等船数千艘，供后宫、诸王、公主、百官、僧尼、道士、蕃客乘坐，并装载内外各官署供奉的物品，共用拉船的民夫八万多人，其中拉漾彩以上级别船只的有九千多人，称为“殿脚”，都穿锦彩制作的袍子。还有平乘、青龙、艨艟、艚艟、八棹、艇舸等船数千艘，由十二卫士兵乘坐，并装载兵器帐幕，由士兵自己拉船，不征用民夫。船队首尾相接二百多里，照耀江河陆地，骑兵在两岸护卫行进，旌旗遍野。所经过的州县，五百里以内都命令进献食物，多的一个州要献上一百车，极尽水陆珍奇；后宫妃嫔都吃腻了，出发的时候，大多丢弃或埋掉。
契丹侵犯营州，炀帝下诏命通事谒者韦云起监护突厥军队讨伐，启民可汗调拨骑兵两万，受韦云起指挥。韦云起将全军分为二十营，分四路并进，各营相距一里，不得混杂，听到鼓声行进，听到号角声停止，除非公务派遣，不得骑马奔跑，三令五申之后，击鼓出发。有个叫纥干的突厥军官违反约定，韦云起将他斩首，拿着首级示众。于是突厥的将帅进见韦云起，都跪着用膝盖行走，两腿发抖，不敢抬头仰视。契丹原本臣属于突厥，对突厥并无猜忌。韦云起进入契丹境内后，让突厥人诈称是去柳城与高丽做贸易，敢泄露实情的斩首。契丹没有防备，距离契丹军营五十里时，隋军快速前进袭击，俘虏契丹男女四万人，将男子全部杀死，把女子及牲畜财产的一半赏赐给突厥，其余都收归隋朝。炀帝大喜，召集百官说：“韦云起用突厥军队平定契丹，文武全才，我现在亲自提拔他。”提升韦云起为治书侍御史。
当初，西突厥阿波可汗被叶护可汗俘虏，国人拥立鞅素特勒的儿子，这就是泥利可汗。泥利去世后，他的儿子达漫即位，号称处罗可汗。他的母亲向氏，本是中国人，后来改嫁给泥利的弟弟婆实特勒。开皇末年，婆实和向氏入朝，遇到达头可汗叛乱，就留在长安，住在鸿胪寺。处罗可汗大多居住在乌孙故地，统治无方，国人很多反叛，又受到铁勒的困扰。铁勒，是匈奴的后裔，部落种类最多，有仆骨、同罗、契苾、薛延陀等部，酋长都称俟斤。各族姓虽然不同，通称为铁勒，大体上与突厥风俗相同，以抢掠为生，没有大的君主，分别隶属于东、西突厥。这一年，处罗可汗率军攻击铁勒各部，加重他们的赋税，又猜忌薛延陀部，担心他们叛乱，就召集其酋长数百人，全部杀死。于是铁勒各部都反叛，拥立俟利发俟斤契苾歌楞为莫何