后于太陵。诏以“杨素经营葬事，勤求吉地，论素此心，事极诚孝，岂与夫平戎定寇比其功业！可别封一子义康公，邑万户。”并赐田三十顷，绢万段，米万石，金珠绫锦称是。
蜀王秀至长安，上见之，不与语；明日，使使切让之。秀谢罪，太子诸王流涕庭谢。上曰：“顷者秦王糜费财物，我以父道训之。今秀蠹害生民，当以君道绳之。”于是付执法者。开府仪同三司庆整谏曰：“庶人勇既废，秦王已薨，陛下见子无多，何至如是！蜀王性甚耿介，今被重责，恐不自全。”上大怒，欲断其舌，因谓群臣曰：“当斩秀于市以谢百姓。”乃令杨素等推治之。
太子阴作偶人，缚手钉心，枷锁杻械，书上及汉王姓名，仍云“请西岳慈父圣母神兵收杨坚、杨谅神魂，如此形状，勿令散荡。”密埋之华山下，杨素发之；又云秀妄述图谶，称京师妖异，造蜀地征祥；并作檄文，云“指期问罪”，置秀集中，俱以闻奏。上曰：“天下宁有是邪！”十二月，癸巳，废秀为庶人，幽之内侍省，不听与妻子相见，唯獠婢二人驱使，连坐者百馀人。秀上表摧谢曰：“伏愿慈恩，赐垂矜愍，残息未尽之间，希与瓜子相见；请赐一穴，令骸骨有所。”瓜子，其爱子也。上因下诏数其十罪，且曰：“我今不知杨坚、杨谅是汝何亲？”后乃听与其子同处。
初，杨素尝以少谴敕送南台，命治书侍御史柳彧治之。素恃贵，坐彧床。彧从外来见之，于阶下端笏整容谓素曰：“奉敕治公之罪！”素遽下。彧据案而坐，立素于庭，辨诘事状。素由是衔之。蜀王秀尝从彧求李文博所撰《治道集》，彧与之；秀遗彧奴婢十口。及秀得罪，素奏彧以内臣交通诸侯，除名为民，配戍怀远镇。
帝使司农卿赵仲卿往益州穷案秀事，秀之宾客经过之处，仲卿必深文致法，州县长吏坐者太半。上以为能，赏赐甚厚。
久之，贝州长史裴肃遣使上书，称：“高颎以天挺良才，元勋佐命，为众所疾，以至废弃；愿陛下录其大功，忘其小过。又二庶人得罪已久，宁无革心！愿陛下弘君父之慈，顾天性之义，各封小国，观其所为：若能迁善，渐更增益；如或不悛，贬削非晚。今者自新之路永绝，愧悔之心莫见，岂不哀哉！”书奏，上谓杨素曰：“裴肃忧我家事，此亦至诚也。”于是征肃入朝。太子闻之，谓左庶子张衡曰：“使勇自新，欲何为也？”衡曰：“观肃之意，欲令如吴太伯、汉东海王耳。”肃至，上面谕以勇不可复收之意而罢遣之。肃，侠之子也。
杨素弟约及从父文思、文纪、族父忌并为尚书、列卿，诸子无汗马之劳，位至柱国、刺史；广营资产，自京师
