他即位第一年,命杨素营建东京宫室,又命宇文恺与封德彝等造显仁宫,决定迁都洛阳。他还征集各地的奇材异石,将这些奇异的石材运送到洛阳。运送石材可不是件容易的事,农民被当成牲口那样使唤来运输石材,千里不绝,许多人都活活累死在路上。
他还在洛阳西郊下令建一座占地二百多亩的西苑,苑内有海,海中修造三个高一百多尺的仙岛,岛上建亭台楼阁。海的北面有龙鳞渠,沿渠修建了十六个别院,每院由一个妃子主管。西苑的建筑非常华丽,渠水曲折流入海中,整个西苑被点缀得四季如春。
就在同一年,杨广征调一百多万民工,为方便自己出行游玩以及加强对南方的统治,劳民伤财修建了一条东北起自涿郡(今河北省涿州市),东南到苏杭,全长四千多里的大运河。大运河的修建历时六年,耗费的人力物力不计其数。
杨广在大运河两旁开辟大道,道旁种上榆树和柳树,岸边每隔两个驿站便设置一座行宫,供杨广休息。从洛阳到江都(今江苏省扬州市),杨广设置的行宫有四十多座。
据统计,开凿大运河,动用的民工约一亿五千万,许多开挖运河的民工累死在河中。在施工的过程中,有一段河道挖得浅了些,暴虐的杨广竟下令将负责挖掘这一段河道的官吏和民工,总共五万多人全部捆住手脚,活埋在岸边。