說他荒淫無度其實是當時老百姓對他的詆譭，但本質卻還是隋煬帝自己造成的，因為隋煬帝喜歡征戰和搞政績，所以國庫空虛，賦稅較重，而且隋文帝沒有很好的經濟治理能力，也不懂得體恤百姓。所有貧苦的百姓就會覺得隋煬帝是暴政，是為了自己的荒淫無度而剝削老百姓。中國有一句古話，“好事不出門，壞事傳千里”。所以當時但凡有一點隋煬帝的負面訊息，就會無限放大，這也就是為什麼他的名聲差，但是政績好的原因。

老子怎麼兒子就一定怎樣麼？這是什麼邏輯。

再者隋文帝也不是很專情，只是敬愛皇后，當時皇后外出不在宮中，隋文帝一時興起寵幸了一個宮女，結果被皇后知道了直接把宮女給打死……氣得老爺子策馬奔騰幾百裡，說出吾身為天子竟不得自由云云。楊素和高熲在後面追一時半會居然追不上，好說歹說還是把老爺子給哄回去了，皇后就去謝罪，夫妻遂和好如初。

其次說隋煬帝荒淫也說不上，比隋煬帝荒淫的帝王大有人在，諸如漢成帝，晉武帝，北齊高家，南宋前後廢帝，唐太宗，金海陵王等等，哪個不在荒淫榜上有一席之地？唐太宗殺死自己老哥老弟後當天夜裡就把人家老婆給睡了，你說荒淫不荒淫？正史記載隋煬帝一生僅有一後五妃嬪，三子一女。而且隋煬帝當皇帝之後基本都在巡遊各地，在都城的時間總計不超過4年。還哪有那麼多閒空去寵幸女人？說其荒淫不過是造反者們為自己合法性提供的遮羞布罷了。再加上演義小說之流的杜撰，形象就在人們心中固定下來了。