有沙门惠恩、崛多等，颇解占候，纶每与交通，常令此三人为度星法。有人告纶怨望咒诅，帝命黄门侍郎王弘穷治之。弘见帝方怒，遂希旨奏纶厌蛊恶逆，坐当死。帝令公卿议其事，司徒杨素等曰：“纶希冀国灾，以为身幸。原其怀恶之由，积自家世。惟皇运之始，四海同心，在于孔怀，弥须协力。其先乃离阻大谋，弃同即异，父悖于前，子逆于后，非直觊觎朝廷，便是图危社稷。为恶有状，其罪莫大，刑兹无赦，抑有旧章，请依前律。”帝以公族不忍，除名为民，徙始安。
诸弟散徙边郡。大业七年，亲征辽东，纶欲上表，请从军自效，为郡司所遏。未几，复徙朱崖。及天下大乱，为贼林仕弘所逼，携妻子窜于儋耳。后归大唐，为怀化县公。