隋杨素高祖时为尚书右仆射专掌朝政帝令素监营仁寿宫素遂夷山堙谷督役严急作者多死宫侧时闻鬼哭之声及宫成帝令高颎前视奏称颇伤绮丽大损人丁高祖不悦素忧惧计无所出即于北门启独孤皇后曰：帝王法有离宫别馆今天下太平造此一宫何足损费后以此理喻帝帝意乃解，于是赐钱百万锦绢三千叚及太子勇败长子长宁王俨亦坐废黜上表乞宿卫辞情哀切高祖览而悯然素进曰：伏愿圣心同于螫手不宜复留意。